• Super User

    E' corretto il mio file robots?

    Ho rifatto il mio sito da statico a dinamico.
    Premetto che è la prima volta che uso wordpress.

    Ho fatto questa file:
    Allow: /wp-content/uploads/
    Disallow: /wp-
    Disallow: /cgi-bin/
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Disallow: /wp-content/
    Disallow: /trackback/
    Disallow: /feed/
    Disallow: /comments/
    Disallow: /trackback/
    Disallow: /feed/
    Disallow: /comments/
    Disallow: /
    ?

    Disallow: /
    ?
    Disallow: /tag/
    Disallow: /category/
    Sitemap: miosito.it/ wordpress/ sitemap. xml. gz

    E' corretto?
    Perchè ho dei dubbi sul fatto di mettere il disallow per le directory wp e nello stesso tempo mettere Allow: /wp-content/uploads/ ?


  • Super User

    Ho aggiunto il disabilita anche a author, ma nonostante questo noto che mi vengono indicizzate lo stesso le pagine category e author, dove ho sbagliato?
    Perchè non vorrei avere penalizzazioni per contenuti duplicati.