Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

spider/crawler auch bei euch z.Z. sehr aktiv???

Alles zum Thema: Robots, Spider, Logfile-Auswertung und Reports
Neues Thema Antworten
fool
PostRank 5
PostRank 5
Beiträge: 200
Registriert: 28.03.2004, 12:12

Beitrag von fool » 08.01.2005, 16:10

Hallo zusammen,

ist das nur bei mir so, dass ich seit Weihnachten alle möglichen seltsamen Spider bei mir sehe und total viele Zugriffe von alten Bekannten, die ich schon längst bzw. länger ausgesperrt habe, wie psbot und andere Bildersammler.

Hier ein paar neue - wobei der erste Eintrag schon zum schmunzeln ist:

4.79.40.166 - - [05/Jan/2005:05:19:07 +0100] "GET /robots.txt HTTP/1.0" 200 5921 "-" "Holmes/1.0"
4.79.40.174 - - [05/Jan/2005:05:20:13 +0100] "GET /Links.html HTTP/1.0" 403 1683 "-" "sherlock/1.0"


63.241.61.8 - - [05/Jan/2005:17:25:06 +0100] "GET /robots.txt HTTP/1.0" 403 1683 "-" "ConveraCrawler/0.4"

Auch noch nie gesehen:

213.239.197.150 - - [03/Jan/2005:06:28:16 +0100] "GET /robots.txt HTTP/1.0" 200 5921 "-" "PEERbot www.peerbot.com"

195.175.37.27 - - [03/Jan/2005:10:44:40 +0100] "GET /Neu2004/ HTTP/1.0" 404 1981 "-" "Shit Happens"
195.175.37.27 - - [03/Jan/2005:10:44:41 +0100] "GET /favicon.ico HTTP/1.0" 200 894 "-" "Shit Happens"
-Wenn das mal nicht ein super UA ist!


213.170.2.69 - - [03/Jan/2005:22:28:52 +0100] "HEAD / HTTP/1.1" 206 0 "-" "Knowledge.com/0.3"


Weht nicht weg, wenn ihr auch im Norden wohnt
gruß
fool