• User

    Provider blocca-spider. Consigli

    Ciao a tutti,
    vorrei sottoporvi un problema segnalatomi da un webmaster di un noto portale su un mio sito web http://www.immobilhome.com
    Usando un browser testuale il server mi dà l'errore 400

    server returned error code 400Request: GET http://www.immobilhome.com/delorie.htm HTTP/1.0HTTP/1.0 400 Bad RequestDate: Wed, 27 Jun 2007 08:06:15 GMTServer: ApacheContent-Length: 226Content-Type: text/html; charset=iso-8859-1Age: 0X-Cache: MISS from delorie.comProxy-Connection: close

    la cosa più strana è che il sistemista della server farm del mio provider ha detto che la loro politica non permette l'accesso via testuale e quindi solo il GoogleBot che nella connessione HTTP emula il browser può vedere ed indicizzare il sito.
    Credo che questa sia una GROSSA penalizzazione ai miei siti web. Vorrei quindi qualche consiglio su come comportarmi. La mia paura è quella che questo provider possa in qualche modo ostacolarmi il lavoro di indicizzazione , chiudendo alcuni tipi di connessione o, addirittura, impendendo agli spider l'indicizzazione.
    Cosa ne pensate?
    Grazie a tutti


  • User Attivo

    @fabiano said:

    Vorrei quindi qualche consiglio su come comportarmi.

    la cosa mi pare strana ma se chi gestisce i sistemi del tuo provider conferma e considera una loro policy corretta bloccare gli spider testuali (tutti tranne googlebot) ed il tuo lavoro e' pubblicare siti e posizionarli sui motori direi che puoi comportarti in un solo modo: cambia provider


  • Super User

    Ci sei anche su Yahoo e msn, quindi non è vero che passa solo googlebot, comunque...

    Personalmente gli chiederei i vantaggi di questa operazione ed i dettagli (veri) di cosa passa, e cosa no.
    Se la risposta non ti convince cambia provider.


  • User

    Sì, so che qualcosa passa.. anche se non mi ha detto esattamente cosa.
    Ora attenderò qualche giorno per vedere se risolvono il problema. Credo cmq che tale non richiesta "feature" abbia influito negli scorsi due mesi sull'indicizzazione.
    Yahoo e Google infatti mi hanno un po' penalizzato sulle pagine presenti.
    Vedremo


  • User Attivo

    @Stefano said:

    Ci sei anche su Yahoo e msn, quindi non è vero che passa solo googlebot, comunque...

    Personalmente gli chiederei i vantaggi di questa operazione e i dettagli (veri) di cosa passa, e cosa no.
    Se la risposta non ti convince cambia provider.

    Come ha perfettamente detto Stefano sarebbe molto interessante sapere i motivi per i quali hanno bloccato tali browser. Dall?esperienza con i provider che creano problemi anzichè risolverli, ti posso dire che, probabilmente, in un prossimo futuro cambierai il provider e andrà benissimo così.