- Home
- Categorie
- La Community Connect.gt
- Tutto sulla Community
- Qualcuno conosce questo spider?
-
Qualcuno conosce questo spider?
Ciao a tutti,
è un paio di giorni che questo ip: 38.98.19.* mi sta girando su diversi siti dichiarando questo Useragent: Snapbot/1.0sapete chi è e cosa fa?
-
Che sia lo spider di http://www.snap.com/ ?
-
effettivamente è la prima cosa che ho pensato
, per non riesco a risolvere l'ip e la cosa mi sembrava un po strana....
-
@Tagliaerbe said:
Che sia lo spider di http://www.snap.com/ ?
Non penso, come emerge [url=http://66.249.93.104/search?q=cache:XZwGb-QJNX4J:www.psychedelix.com/cgi-bin/csv2html.pl%3Fdata%3Dallagents.csv%26template%3Ddetail.html%26match%3D%255Cbid_new_250506_1%255Cb+Snapbot&hl=en&ct=clnk&cd=3]qui
Altrove ho trovato che è un "bad bot"!
Saluti
-
In effetti snap.com risponde su di un IP (63.251.211.148) di una classe completamente diversa da quella del bot.
-
-
Sono "succhiatori" di banda e irrispettosi del "Robots Exclusion Protocol"; questa è una lista:
http://www.kloth.net/internet/badbots.php
-
@Tagliaerbe said:
Sono "succhiatori" di banda e irrispettosi del "Robots Exclusion Protocol"; questa è una lista:
http://www.kloth.net/internet/badbots.phpPossono fare qualche danno oppure violano semplicemente il file robots.txt senza fare nulla?
-
@sitionweb said:
Possono fare qualche danno oppure violano semplicemente il file robots.txt senza fare nulla?
no, danni no, però consumano banda e falsano le statistiche...
io intanto l'ho bloccato
