Seite 1 von 1

RPT-HTTPClient/0.3-3

Verfasst: 10.08.2005, 16:40
von fool
Hallo,

habe heute in den logs eine paar Zugriffe mit dieser UA

RPT-HTTPClient/0.3-3

holt keine robots und interessiert sich nur für Seiten, die ich natürlich eigentlich per robots gesperrt hatte.

Kommt von unterschiedlichen IPs, die zur Telekom gehören.

Hat noch jemand sowas beobachtet in den letzten Tagen.

Google führt einen ja zu tausend möglichen Seiten, die alle nicht sehr schlau machen.

Gruß
fool

Verfasst:
von

RPT-HTTPClient/0.3-3

Verfasst: 10.08.2005, 18:13
von net(t)worker
das kann alles mögliche sein, es handelt sich dabei wohl um eine java Klasse die einen HTTP Client zur Verfügung stellt... was da jetzt genau gespidert wurde lässt sich so nicht erkennen... könnte ein einfacher Linkchecker sein, oder auch ein Spider der Content für ne Pseudo-SE sammelt... oder evtl. hat sich jemand selber einen Browser zusammengebastelt... da war ein Progger wohl mal wieder zu blöd einen anständigen UserAgent zu definieren.... ausperren und gut is...