Ciao a tutti, ho messo online il sito w ww.affarefacile.it un sito di annunci online.
ho seguito non dico non dico in modo maniacale ma quasi tutti i vostri vari consigli del forum.
premetto che di SEO sono abbastanza inesperto e ho avuto modo di iniziare a capire qualcosa con il libro di GT
Che impressione ne ricavate dal sito???
Voi cosa fareste altro??? tutti i consigli sono stra super accetti:)
Posto questo messaggio per chiudere il discorso e sperando sia di aiuto ad altri "incappati" nello stesso problema. Nel mio sito il tutto si è risolto verso 11 giugno (l'anomalia è iniziata 1 giugno).
Il problema a cui si fà riferimento è il tema principale della discussione cioe quando il webmaster tool indica che "Google non riesce ad accedere al sito" oppure segnala "robots.txt non raggiungibile" .
Come ho precedentemente scritto "potrebbe trattarsi di un glitch" quindi per capire se si tratta di un glitch o meno si dovrebbe in sequenza fare queste verifiche:
Mandare un'email al gestore del Hosting per verificare se da parte loro vi è un blocco verso gli IP google (Veramente remoto perchè nessun hoster sarebbe cosi stupido e suicida)
Fare un test degli header http con qualche tool online e vedere se il server restituisce l'header corretto.
Verificare con un browser settato con User Agent Googlebot, se si riesce a recuperare la pagina. (firefox ha un plugin che permette di fare questo)
Controllare il file robots.txt e fare la verifica di esso tramite sempre qualche tool online (ceck della sintassi).
Se dopo aver fatto tutto ciò non emerge alcuna anomalia è altamente problabile sia il glitch del GWT.
Non vi resta che attendere o scrivere sul forum di supporto google.
Io ho notato che effettivamente quando il googlebot inizia nuovamente ad accedere alle pagine, il GWT segnala la fine dell'errore dopo 3-4 giorni.
In pratica tra l'attività di scansione e i dati di monitoraggio che il GWT mostra sono ritardati mediamente 2 3 giorni.
l'anomalia al mio sito si è presentata 1 giugno, verso l'11 il GWT ha eliminato l'errore,cmq io avevo installato un piccolo script nella mia home che rilevava il passaggio del googlebot. Lo script mi ha segnalato che già dal 7 di giugno il googlebot recuperava pagine e solo verso 11 il GWT ha finalmente recuperato la pagina.
Girando tra le varie discussioni dei google groups sul tema webmaster circola la voce che sia un "glitch" di google e che sia un problema abbastanza comune...
stamattina l'errore è cambiato ....da "robots.txt non raggiungibile" a "pagina non raggiungibile". Questa cosa avvalora l'ipotesi che il problema non è legato ne al provider (confermatomi oggi che non esiste alcun blocco ip) ne alla programmazione del sito.
a sto punto penso che è colpa del provider
si , usando firebug nell'header torna il 404
gia provato, anche se cancello il file il webmaster tool dice che robots.txt non è raggiungibile
Iceman...niente fatte le tue modifiche ho modificato il file (cancellato e ricreato il nuovo con la sola direttiva del post di sopra ) ma il server risponde sempre nella stessa maniera 304, secondo me finchè il server non risponde con codice 200 google non legge il file. Ora è da capire solo se ciò lo posso fare forzando la cosa nel .htaccess oppure è una cosa da settare nel modulo di apache del dell'hosting.
Rieccomi credo di aver trovato un indizio analizzando gli headers con il firebug
Mentre questo è un header corretto di un'altro robots.txt di un'altro sito da me gestito.
qualcuno sa come risolvere l'errore 304 ??? . Ho inviato un ticket ad aruba e aspetto risposta...
stessa cosa...file robots.txt non raggiungibile, l'hosting aruba sta dando risposte evasive .tipo "controlla il file, non abbiamo trovato il file" può essere che essendo un hosting base loro bloccano il googlebot??? considerando che negli ultimi gioni c'era una visita del bot quasi ogni 10 min.
accatittippi // imageshack.us/f/811/robotsn.jpg/
razie ancora a tutti per l'interessamento....Allora ho fatto come mi hai consigliato tu Iceman, ho corretto il file robots.txt con il tool online, ho provato a recuperare la pagina dal webmaster tool con il nuovo file ma il niente, stesso risultato (come evidenziato in giallo nella foto allegata) .
Dopodichè ho cancellato completamente il file robots.txt, ritentato il recupero ma ancora lo stesso errore (evidenziato in rosso nella foto allegata).
Ho inviato lo stesso screeshot ad aruba ma ancora non mi hanno risposto.
Potrebbe essere un errore, un bug di google???
Su Strumenti per il webmaster mi indica :
/-------------------------------------------
Errori del sito Sono visualizzati i dati degli ultimi 90 giorni
Google non è riuscita a sottoporre a scansione il tuo sito perché non siamo stati in grado di accedere al file robots.txt.robots.txt.
/-------------------------------------------
questo è il messaggio di errore di google (copia incolla)...in pratica scrive due volte robots.txt.robots.txt
Grazie dell'interessamento da parte vs....cmq si certo www(punto ) affarefacile punto it. , girovagando su google ho notato che si tratta di un problema piu o meno comune, ma non riesco a capire se è un blocco di ip da parte del provider (aruba al quale ho già inviato ticket di assistenza) oppure è un problema del sito. Se provo a fare il "visualizza come google" (il fetch as googlebot) mi restituisce sempre l'errore che il robots.txt è irrag
è settato su www(punto)sito. it (slash) robots ma la cosa strana è che fino al 1 giugno ha funzionato tutto bene, poi verso le 12:00 mi ha segnalato il problema, non è stato cambiato alcun settaggio.
Salve a tutti i frequentatori del forum, chiedo a voi se qualcuno è a conoscenza di questo problema.
Su "strumenti per webmaster" mi indica che non riesce a recuperare il file robots.txt nonostante esso sia presente nella root principale del sito.
Mi indica errore all'87%, ha tentato 147 volte di accedere ma non ci è riuscito.
La cosa strana è che prima del 1/06 ha funzionato correttamente e senza alcun intervento sul sito ha smesso di funzionare.
Accedendo dal browser direttante al file, il browser lo visualizza correttamente.
ho cancellato e riscritto a mano il file, settatto i permessi da 775 a 444 ma nulla.
Pensando fosse un malware, ho verificato l'accessibilità del sito settando lo useragent del browser come googlebot e il sito si vede correttamente.
Questa cosa mi è strana...
Si concordo perfettamente sulla guerra, mi chiedo cmq come mai scrivendo "annunci gratuiti" su google non esce nemmeno nella 1000esima posizione...
thank you 1000 per la risposta il sito è affarefacile.it non ho postato l'indirizzo perchè pensavo non fosse possibile per le rules del forum
Salve a tutti sono Frank Mogan, ho realizzato da circa un mese un sito di annunci gratuiti, e mi sono subito imbattuto su tutte le problematica seo. Il libro di Taverniti quello del 2013 mi ha aperto molto le conoscenze su tutto cio che riguarda seo, e quindi sono venuto a conoscenza di questo forum.
Sarà forse ambiziosa ma la mia idea è quella di posizionare in buona maniera il sito con le keywords "annunci gratuti".
Qualsiasi succerimento è....
Ciao a tutti, sono Frank Mogan, sono un nuovo iscritto a questo forum, sono venuto a conoscenza di questo forum dopo aver letto il libro Seo di Taverniti 2013, da poco mi sono affacciato alla tematica Seo & company. 
Provengo dal mondo della programmazione c dei microcontrollori a 8/16 bit....e il seo è...una scienza per me ancora mistica.
