NON Posizionamento nei motori di ricerca

[helpdesk]

NON Posizionamento nei motori di ricerca

Come si evita di essere spiderizzati dai motori di ricerca? Per esempio, ho un sito che ancora non è completo ma che è già in remoto e vorrei che non fosse indicizzato fintanto che non è terminato.

L'ho detta grossa?

In tutta onestà ho pubblicato questo quesito anche in un altro forum che frequesto da anni. Spero che non vi incaz***erete troppo per il crossposting..non è che sia mia abitudine.
Ciao e grazie se sopravviverò alle votre ire funeste...

[gh3]

metti una regola .htaccess che preveda user e password per poter entrare nel sito, oppure semplicemente scrivi un file robots.txt che blocchi tutti gli spider.

Per bloccare l'intero sito basta che scrivi al suo interno:

User-Agent: *
Disallow: /

[desertstorm]

tieni conto che il robot potrebbe essere ignorato da alcuni spider... in questo caso meglio un htacess o protezione password

[gh3]

si per sicurezza è meglio sempre .htaccess con user e pass, il dubbio era se voleva nel mentre lasciare il sito fruibile agli utenti o no...