ABAKUS

Hallo Leute,
musste heute beim Blick auf meine Logs feststellen, dass ein unbekannter Robot unsere komplette Seite eingelesen hat. Das sieht dann so aus:

420206 217.85.200.220 2006-11-25 2006-11-25 15:53:48 https://www.skigebiete-test.de/unterkuenfte/zermatt... n.v.
420205 217.85.200.220 2006-11-25 2006-11-25 15:53:47 https://www.skigebiete-test.de/unterkuenfte/zermatt... n.v.
420204 217.85.200.220 2006-11-25 2006-11-25 15:53:47 https://www.skigebiete-test.de/unterkuenfte/zermatt... n.v.
420203 217.85.200.220 2006-11-25 2006-11-25 15:53:47 https://www.skigebiete-test.de/unterkuenfte/zermatt... n.v.
420202 217.85.200.220 2006-11-25 2006-11-25 15:53:47 https://www.skigebiete-test.de/unterkuenfte/zermatt... n.v.
420201 217.85.200.220 2006-11-25 2006-11-25 15:53:47 https://www.skigebiete-test.de/unterkuenfte/zermatt... n.v.

Insgesa,t wurden so auf diese Weise heute 100.000 Seiten eingelesen. Habt Ihr sowas schon mal erlebt??? Muss ich die IP blocken? Bringt mir das überhaupt was?

Danke
Martin

Die IP-Adresse gehört zu - Germany - Baden-wurttemberg - Mannheim - Deutsche Telekom Ag

Und das heißt nun????

Das es vielleicht ein ganz normaler Besucher war?

Es kann sein, dass sich dieser Besucher deine komplette Webseite auf der Festplatte abgespeichert hat.

Aber dann müsst ich doch den Referer sehen oder??
Und 100.000 HTML Seiten abspeichern, kann das klappen??

Klar, es gibt Programme damit kannst du das machen.

Suche bei Google mal nach - "Webseite komplett abspeichern"

Und dann in ruhe offline lesen.

Na dann bedank ich mich mal für eure Antworten. Dann wart ich einfach mal ab, ob sich das jetzt erledigt hat.
@Rudi Ratlos
ja es sind insgesamt über 100.000 Seiten. Fast 10.000 Hoteleinträge mit eigener Seite, Übersichtsseiten, Skigebietsseiten, und und und. Das ganze auf deutsch und auf englisch.
Lässt sich prima mit jsp oder php machen sowas. Aber du kannst ja gerne mal zählen wenn dus nicht glaubst

No Prob