Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

Unterschied: ia_archiver-web.archive.org und ia_archiver?

Alles zum Thema: Robots, Spider, Logfile-Auswertung und Reports
Neues Thema Antworten

 sumas indizieren nur startseite

83.137.101.37 bekannt?

 
Chris2005
PostRank 9
PostRank 9
Beiträge: 1284
Registriert: 14.04.2005, 23:58

Beitrag von Chris2005 » 19.04.2005, 19:07

Hallo,

der ia_archiver guckt bei mir regelmässig vorbei und benimmt sich auch nicht ausserordentlich merkwürdig.

Letztens tauchte aber der ia_archiver-web.archive.org auf und hat sich nur die robots.txt gezogen und ist dann wieder verschwunden.

Code: Alles auswählen

207.241.228.218 - - [07/Apr/2005:12:54:05 +0200] "GET /robots.txt HTTP/1.0" 200 - "-" "ia_archiver-web.archive.org"
207.241.228.198 - - [07/Apr/2005:12:54:20 +0200] "GET /robots.txt HTTP/1.0" 200 - "-" "ia_archiver-web.archive.org"

207.241.231.200 - - [09/Apr/2005:03:32:07 +0200] "GET /robots.txt HTTP/1.0" 200 - "-" "ia_archiver-web.archive.org"
207.241.228.214 - - [09/Apr/2005:03:32:17 +0200] "GET /robots.txt HTTP/1.0" 200 - "-" "ia_archiver-web.archive.org"
Wo liegt der Unterschiede zwischen dem "normalen" ia_archiver und der mit "web.archive.org" hinten dran?

Vielen Dank im Voraus für die Antwort,
Chris
Nach oben
Antworten

Zurück zu „Spiders / Robots Themen“

  • Vergleichbare Themen
    Antworten
    Zugriffe
    Letzter Beitrag