File ROBOTS

[a]

File ROBOTS

cos'è e a cosa serve?
come deve essere fatto?
dove deve essere caricato?
serve realmente ?

[rinzi]

@a said:

cos'è e a cosa serve?
come deve essere fatto?
dove deve essere caricato?
serve realmente ?
si, serve.
serve ad indicare ai motori cosa non spiderizzare.

qui trovi tutto quello che devi sapere
http://www.motoricerca.info/robots.phtml

[a]

è utile anche metterlo per dire di non eslcudere niente?

è meglio utilizzare questa sintassi:

User-agent: *
Disallow:

oppure specificare ad uno ad uno i vari spider non mettendo quindi l'asterisco?

[rinzi]

si, eventualmente metti un file vuoto robots.txt

[a]

quindi è inutile che specifichi ad uno ad uno gl spider dicendo di non escludere niente !

[rinzi]

@a said:

quindi è inutile che specifichi ad uno ad uno gl spider dicendo di non escludere niente !
se NON escludi nulla o fai un file vuoto

o scrivi così

User-agent: *
Disallow:

[rinzi]

qui trovi tutto quello che devi sapere
http://www.motoricerca.info/robots.phtml

comunque leggi la pagina che ti ho suggerito, è spiegato veramente bene

se poi hai altri dubbi chiedi qui

[a]

si ho letto,
grazie !!!

[rinzi]

@a said:

si ho letto,
grazie !!!

perfetto.. se serve chiedi