Kontrolliert vom Yahoo-Crawler

Der yahoo-Crawler hat heute scheinbar getestet, ob mein Server auch brav den 404-Statuscode ausgibt, wenn Seiten nicht existieren. In den Log-Dateien sah das so aus:

72.30.215.20 – – [08/Jun/2007:23:56:28 +0200] „GET /SlurpConfirm404/ACTIVE/exlect/galerie.htm HTTP/1.0“ 404 417 „-“ „Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)“

72.30.215.20 – – [09/Jun/2007:01:30:26 +0200] „GET /SlurpConfirm404/musikk.htm HTTP/1.0“ 404 402 „-“ „Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)“

72.30.215.86 – – [09/Jun/2007:01:32:03 +0200] „GET /SlurpConfirm404.htm HTTP/1.0“ 404 395 „-“ „Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)“

72.30.215.27 – – [09/Jun/2007:01:51:18 +0200] „GET /SlurpConfirm404/scholarships/nzyowie.htm HTTP/1.0“ 404 416 „-“ „Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)“

72.30.215.105 – – [09/Jun/2007:02:21:04 +0200] „GET /SlurpConfirm404/Filmovi.htm HTTP/1.0“ 404 403 „-“ „Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)“

Schreibe einen Kommentar

Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert.