@Gillis said:
Ciao a tutti,
@LuigiMdg: mi sa che non hai capito la mia domanda: volevo sapere perchè avevo quel crawl delay su search console quando non avevo mai inserito quella opzione nel file, non capisco perchè mi consigli di bloccare l'intero sito...
@sssimo: grazie della guida, avevo di fatto impostato il robot alla stessa maniera e si, in effetti googlebot ignora la regola del ritardo, solo che volevo semplicemente sapere da dove è saltata fuori quella dicitura e perchè
Grazie ancora a tutti
Ah, non avevo capito la domanda allora.. Non è che hai attivato una CDN? A me capita a volte che non si aggiorna in automatico e devo richiedere di svuotare quel file dalla cache..