Koennt ihr bitte mal guggen mit welcher IP der/die/das Sauger aufgeschlagen ist? Denn das Erkennen ueber den Referer kann ja bekanntlich sehr schnell verhindert werden ;-) Ich habe jetzt einige Tage das bad bot script laufen gehabt und 2 weitere zugriffe identifiziert. Die IPs sind irgendwelche dyn...
naja, das alles könnte aber auch den googlebot treffen oder?
ich werde es mal mit dem bad bot script im test-modus versuchen (versteckter link auf datei die in robots.txt gesperrt ist) und schauen, ob ich die entsprechenden zugriffe damit identifizieren kann.
am 27.4. hatte ich auf meiner website von einer italienischen adsl-ip an einem tag 400 mb traffic. ein blick ins logfile verrät: da wurde die gesamte website gecrawled, angeblich per MSIE 6.0 - aber in so heftiger frequenz, dass das niemand per hand schaffen würde. und in GoogleAnalytics scheint der...
hmm... auf Anhieb würde mir ein SEO einfallen, der eine Site analysiert... grundsätzlich schon, aber in kombination mit den laufend wechselnden IPs ist das meiner meinung nach eher auszuschließen. das deutet in summe doch eher auf einen größeren bot hin, oder? mir ist er im logfile aufgefallen, wei...
nein, das ist ganz sicher kein menschlicher user, er fragt immer nur einzelne seiten ab, und auch die robots.txt, aber jedes mal mit einer anderen IP, selbst wenn die abfragen kurz hintereinander kommen. nachdem diese "IM Teknik AB" auch hosting anbietet, muss es nicht direkt mit diesem un...