1
In Antwort auf maschus Frage:
Die Adresse http://sp.ask.com/docs/about/tech_crawling.html ist veraltet, im Web Archive findet man noch die frühere Info-Seite - jetzt erhält man eine 404 Fehlerseite. Ask selbst gibt an:
Ich habe den User Agent allerdings auch mit der Adresse in meinen Logs, und ebenfalls mit IPs, die zu UUNET gehören
Zur IP habe jetzt ich aber noch diesen Thread auf webmasterworld.com gefunden:
Ask/Teoma or UUNET Spoofer? (zum Lesen kostenlose Registrierung notwendig)
Demnach könnte der Bot doch echt sein. Im letzten Beitrag sind verifizierte IP-Ranges für Ask Jeeves/Teoma aufgeführt
65.214.44.74 Mozilla/2.0 (compatible; Ask Jeeves/Teoma; +http://sp.ask.com/docs/about/tech_crawling.html)
IP zeigt: UUNET Technologies, Inc.
- ist der echt oder fake?
Die Adresse http://sp.ask.com/docs/about/tech_crawling.html ist veraltet, im Web Archive findet man noch die frühere Info-Seite - jetzt erhält man eine 404 Fehlerseite. Ask selbst gibt an:
To determine whether the Ask crawler has visited your site, check your server logs. Specifically, you should be looking for the following user-agent string:
User-: Mozilla/2.0 (compatible; Ask Jeeves/Teoma)
Ich habe den User Agent allerdings auch mit der Adresse in meinen Logs, und ebenfalls mit IPs, die zu UUNET gehören
Zur IP habe jetzt ich aber noch diesen Thread auf webmasterworld.com gefunden:
Ask/Teoma or UUNET Spoofer? (zum Lesen kostenlose Registrierung notwendig)
Demnach könnte der Bot doch echt sein. Im letzten Beitrag sind verifizierte IP-Ranges für Ask Jeeves/Teoma aufgeführt