- Home
- Categorie
- Digital Marketing
- SEO
- robots.txt | comando Allow: / | è valido per tutti i BOT di tutti i motori?
-
robots.txt | comando Allow: / | è valido per tutti i BOT di tutti i motori?
Bella a tutti (qui indicizzazione e robots.txt):
User-Agent: *
Allow: /
...Se scrivo il robots.txt con questo comando "Allow: / "...me lo prendono tutti i motori?
Voi del forum gt lo avrete sicuramente visto quel file vero ?
- Come si fanno 4 file robots.txt per le 4 lingue del mio sito? roba da htacces? Sì? Come?
Ciao!!
P.s mi va bene anche se intanto mi rispondete alla 1 e poi la 2 ci pensate e me lo dite ( sempre se vi và) grazie.
-
Ciao,
come hai detto tu, il codice che segue istruisce tutti i bot dei motori di ricerca di scandagliare tutto il tuo sito
User-agent: *
Allow: /Mentre il codice che segue indica esattamente il contrario
User-agent: *
Disallow: /Non hai bisogno di diversi file per lingue diverse, ne basta uno.
-
Facciamo così...
Allow: / **...me lo prendono tutti i bot ...ok? ....DICIAMO CHE è VERO...hai una risorsa (url ) che sostenga ciò che dici?Perché a me fino a prova contraria il test del robots .txt su master tools dice che ...
**[TABLE="width: 500"][TD][TABLE="width: 1223"]
[TH="class: col-url"]URL[/TH]
[TH="class: col-googlebot"]Googlebot[/TH]
[TH="class: col-useragent"]Googlebot-Mobile[/TH]
[/TR][TD="class: col-url"]http: // www . idroponica. it /[/TD]
[TD="class: col-googlebot"]Ammesso dalla riga 2: Allow: /
Rilevato come directory; file specifici possono avere diverse limitazioni[/TD]
[TD="class: col-useragent"]Ammesso dalla riga 2: Allow: /
Rilevato come directory; file specifici possono avere diverse limitazioni[/TD]
[/TR]
[/TABLE]
[/TD]
[TD][/TD]
[/TR]
[/TABLE]
**
Che vuol dire **Ammesso dalla riga 2: Allow: / ...?Ma non c'è un webmaster tool di Microsoft?
-
Certo, ti do tutti i riferimenti del caso:
w ww.r obotstxt. org/robot stxt.html
en.wik ipedia.org/wiki /Robots_ exclusion_st andardnb: scusa lo spezzettamento, ma non posso postare i link
-
Ciao Lorenzo2011 certo che c'è un webmaster tool di Bing. Lo trovi qui http://www.bing.com/toolbox/webmaster?cc=it e qui trovi una breve panoramica di alcune nuove funzionalità di qualche mese fa http://seoblog.giorgiotave.it/bing-webmaster-tools-seo/2367
Fammi sapere se è tutto chiaro.
-
Vorrei sottoporvi una domanda in linea con questa discussione.
In "miosito.com/robots.txt" avevo:
User-agent: *
Disallow: /search
Allow: /E utilizzando GWT si verificava:
Googlebot ammesso dalla riga 6 Allow: /
[TABLE="class: cms_table, width: 1223"][TD="class: cms_table_col-googlebot"]Rilevato come directory; file specifici possono avere diverse limitazioni.
[/TD]
[/TR]
[/TABLE]
Ritenendo inutile il comando "Allow", l'ho modificato:
User-agent: *
Disallow: /searchE in questo caso, nella verifica su GWT compariva:
"Autorizzato".Mi chiedo se abbia fatto bene a modificare il robots.txt, oppure il comando "Allow: /" era irrilevante ai fini dell'indicizzazione?
Grazie!
-
Sì in questo caso è irrilevante.
In ogni caso il robots.txt non ha nulla a che vedere con l'indicizzazione, ma solo con l'accesso di Googlebot.
-
Perfetto! E grazie per la repentina risposta.
