Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

"Mozilla/3.0 (compatible)"

Alles zum Thema: Robots, Spider, Logfile-Auswertung und Reports
Neues Thema Antworten

 Microsoft URL Control hält sich nicht an robots.txt

Woher kommen diese krassen Zugriffe?

 
GreenHorn
PostRank 10
PostRank 10
Beiträge: 4487
Registriert: 19.12.2005, 15:01

Beitrag von GreenHorn » 26.03.2008, 10:49

"Mozilla/3.0 (compatible)"
Sperrt ihr solche Teile aus? Wenn ja, wie? Schlägt bei mir speidernd mit dynamischen IPs auf und ist mir als browsender User noch nie unter die Finger geraten.

Ok. Habs gefunden...
Nach oben
Antworten

Zurück zu „Spiders / Robots Themen“

  • Vergleichbare Themen
    Antworten
    Zugriffe
    Letzter Beitrag