Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

My_WebCrawler_Agent <-- Wer / Was ist das?

Alles zum Thema: Robots, Spider, Logfile-Auswertung und Reports
Neues Thema Antworten

 Wildcard und robots.txt ?

suche einen spider-simulator

 
coolbobby
PostRank 3
PostRank 3
Beiträge: 67
Registriert: 13.05.2004, 09:51

Beitrag von coolbobby » 25.07.2004, 11:19

Hat einer 'ne Ahnung was My_WebCrawler_Agent für ein Bot ist?
Der ware heute 13000 mal bei mir unterwegs.

Bobby
Nach oben
Anzeige von ABAKUS

von Anzeige von ABAKUS »

Nach oben