@Juanin said:

Ma a cosa ti servirebbero?

Per vedere se ci sono dei link che vengono esclusi che invece non dovrebbero, di conseguenza vedere se modificare il mio robots.txt rendendolo più stringente.

Salve a tutti
Tramite google webmaster ho visto che il robots del mio sito blocca diversi link, purtroppo non riesco da webmaster a vedere l'elenco completo dei link esatti ma solo il loro numero.
esiste qualche strumento, api, applicazione o altro che mi permetta di vedere l'elenco completo ti tutti i link che vengono bloccati?
so perfettamente il robots stesso è l'elenco dei link che vengono bloccati, ma a me serve l'url completo, esempio se blocco tutti gli url che iniziano con /prova/ e sono 1000 vorrei vedere tutti e 1000 questi link.
grazie in anticipo