Kein UA, Alexa Internet

Hallo,

ein Bot (vermutlich - er akzeptiert kein JS und liest das CSS nicht aus, besucht jede Seite nur einmal schön hintereinander) macht sich seit gestern über meine Domain her und ist fleißig am werkeln:

209.237.238.225
209.237.238.227
UNITED STATES, CALIFORNIA
SAN FRANCISCO
ALEXA INTERNET

Er hat keinen User-Agent. Die IP lässt sich in keinen Hostnamen auflösen, bisher hat er die robots.txt befolgt. Was ist das? Soll man den aussperren?

Dazu: wie kann ich per .htaccess alle Bots aussperren, die keinen UA haben? Ist das sinnvoll?

erwartest Du von dem Bestellungen?

Nö

Oder bist du von Alexa abhängig?

Eine echte Suma würde ich ungern ausschließen, aber kommt der Robot echt ohne UA? Was ist denn das für ein Stil?

Was schlägst Du vor?

Nochmal für die Traffic-Unerfahrenen wie mich:

Ist das richtig?

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} !^ia_archiver
RewriteRule ^.* - [F]

Wie bestimme ich, dass der einen 404 und keinen 403 bekommt?

btw: wieso ia_archiver? Der User-Agent ist doch leer? *grübel*

Edit: Ach so, das schließt alles außer ia_archiver aus, ich dummerle habe das ! übersehen ^^ Wie kann ich genau jene ausschließen, die keinen UA haben?

Vielen Dank, Jörg! ^$ hätte mir eigentlich auch einfallen sollen, aber manchmal da leide ich an 'brett-vorm-kopf'itis ^^

Kannst Du mir sagen, wo ich eine Referenz zu den Fehlern finde, die zurückgegeben werden? z.B. [F] steht für Forbidden = 403, was ist dann 404 oder 401?

Au ja, eine Doku mehr zu lesen ^^ Da wird man ja irgendwann noch zum Freak :)) Dankeschön!