Robots.txt: crawl delay comparso dal nulla?

[bobrock4]

Robots.txt: crawl delay comparso dal nulla?

Ho messo un file robots.txt sul server. Questo è lui visto da Dreamweaver (ma anche su Word è lo stesso)

Questo è invece lo stesso file chiamato digitando l'url www.ilsito.it/robots.txt

E' apparsa "miracolosamente" una riga con Crawl-delay: 10. Questa riga non si rimuove dall'url nemmeno modificandolo sul server e rimuovendo eventuali spazi vuoti.

Avete idea perchè?

Grazie, ciao

[lucolo]

Anche io da qualche tempo ho lo stesso problema. Qualcuno ha idea del motivo per cui accade?

[bobrock4]

Le conseguenze sono di poco conto su siti piccoli come quello di questo caso. Ma è molto interessante chiarire perchè appaiono stringhe dal niente..