Zur Navigation

Zyborg in der Bottrap

1 Jörg

Der Bot von Looksmart / Wisenut mit folgender Kennung:

Mozilla/4.0 compatible ZyBorg/1.0 Dead Link Checker (wn.dlc@looksmart.net; http://www.WISEnutbot.com)

und der IP-Adresse 64.242.88.50 ist in meine Bottrap gefallen - in die robots.txt hat er zuvor auchn nicht geschaut. Die IP gehört zu Looksmart, der Bot ist also echt. Der Zusatz Dead Link Checker deutet wohl an, dass es sich nicht um den Standard-Bot handelt. Aber auch ein Linkchecker sollte sich wohl an die robots.txt halten?

18.11.2006 15:19

Beitrag schreiben (als Gast)





[BBCode-Hilfe]