Miragorobot das muss nicht sein !
Verfasst: 02.10.2004, 08:55
Wem ist der Miragorobot auch unangehmen aufgefallen. Er hat bei uns in einer Nacht knapp 20 MB Traffic verursacht. Kaum eine Datei ausgelassen.Das muss ja nicht sein ! Abgesehen davon sind wir auch nicht im Index.
217.154.245.209 - - [01/Oct/2004:07:00:25 +0200] "GET /robots.txt HTTP/1.1" 200 5977 "https://www.miragorobot.com/scripts/mrinfo.asp" "HeinrichderMiragoRobot (https://www.miragorobot.com/scripts/deinfo.asp)"
Wofür überhaupt Miragorobot, für wen ist er noch Zulieferer. Gegen Spam-Methoden bin ich allergisch !
217.154.245.209 - - [01/Oct/2004:07:00:25 +0200] "GET /robots.txt HTTP/1.1" 200 5977 "https://www.miragorobot.com/scripts/mrinfo.asp" "HeinrichderMiragoRobot (https://www.miragorobot.com/scripts/deinfo.asp)"
Wofür überhaupt Miragorobot, für wen ist er noch Zulieferer. Gegen Spam-Methoden bin ich allergisch !