Robots.txt e paginazione

[coscheboy]

Robots.txt e paginazione

Un cliente vuole escludere dalla ricerca l'archivio delle proprie news l'archivio viene però generato con questo URL:

urlSito/pag1/categoria

Il cliente vuole indicizzare solo le pagine relative a url/categoria e non url/pag1/categoria o url/pag2/categoria che istruzione dovrebbe usare secondo voi?

User agent: *
Disallaw: ???

Io ho un'idea (a parte quella di fargli riscrivere correttamente gli url) voi cosa pensate?

[giorgiotave]

Ciao coscheboy (è meglio che riscriva le url :D)

A questo punto puoi fargli escludere le pagine una ad una