Curiosita' robots.txt

mister.jinx

cercando su google per robots.txt disallow
w ww.google.it/search?q=robots.txt+disallow

come primo risultato vedo indicizzato il robots.txt di whitehouse.gov ...

nadzy

Bello!!!

Ma secondo voi è perchè attribuisce un elevata trust ed un elevata importanza al sito della casa bianca?

giorgiotave

Secondo me si

Però anche perchè molti siti lo linkano. Ad esempio ora che è cambiato il Presidente hanno fatto una rivoluzione di sito e cambiato anche il Robots