ABAKUS

Hallo Leute,

werden auch bei euch zip files und so was auch vom bot downgeloded?

GET /download/savegames/jacked_all_access_unlocker_tnt.zip HTTP/1.1" 200 5964 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)


Gruß

linux

Ist wohl für die neueste Google Suche "GOOGLE DOWNLOAD"

IP Adresse? Koennte auch ein gefakter Bot sein ...

66.249.65.209 - - [06/Apr/2006:09:35:27 +0200] "GET /download/savegames/star_wars_battlefront_2_level_unlocker.zip HTTP/1.1" 200 6137 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"
66.249.65.209 - - [06/Apr/2006:09:35:28 +0200] "GET /download/savegames/swat_4_the_stetchkov_syndicate_level_unlocker_tnt.zip HTTP/1.1" 200 3017 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"
66.249.65.209 - - [06/Apr/2006:09:35:29 +0200] "GET /download/savegames/angelmeister_level_unlocker_tnt.zip HTTP/1.1" 200 6991 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"
66.249.65.209 - - [06/Apr/2006:09:35:29 +0200] "GET /download/savegames/worms_4_mayhem_unlocker.zip HTTP/1.1" 200 17090 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"
66.249.65.209 - - [06/Apr/2006:10:21:51 +0200] "GET /download.php?save=1&cheats_eintrag_id=15220 HTTP/1.1" 302 2 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"
66.249.65.209 - - [06/Apr/2006:10:22:04 +0200] "GET /download/savegames/Ford_Street_Racing_Unlocker-TNT.zip HTTP/1.1" 200 5245 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"


also kein einzeilfall


soll ich mal nen virus reinpacken


gruß

linux

Ist nen echter bot... Schon krass was da abgeht... Erklaerung habe ich allerdings keine ...

dito zum glück habe ich mit der traffic kein problem, bloß wenn der mal anfängt dann ist meine 100 Mbit schnell zu, und wenn der den download server findet mit z.b tomb raider demo die 400 mb hat dann kann das kraß werden.


mal eine frage an alle hab nur ich oder kommt das bei euch auch, ich freu mich ja aber bedenklich ist das

gruß

linux

Sperr doch einfach das Download Verzeichnis... ich sehe keinen Sinn darin, dass Google ausfuerbare Datein runterlaedt...

bin schon dabei, aber ich war mir eben nicht bewußt das google so was macht. wobei ich mich frage entpackt der dann das zip denn da wäre ein text über das spiel und die seite drinnen.


gruß

linux

Chris2005 hat geschrieben:Sperr doch einfach das Download Verzeichnis... ich sehe keinen Sinn darin, dass Google ausfuerbare Datein runterlaedt...

ZIP-Dateien sind keine ausführbaren Dateien. Oft verbergen sich darin auch Dokumente, wie z. B. PDF- oder TXT-Dateien, die ja bekanntlich auch in den Index aufgenommen werden.
Vermutlich nur ein Test. Kann mir auch nicht vorstellen, daß der Bot 400-MB-Dateien runterlädt, denn das würde nicht nur den Traffic der betroffenen Seiten ins Unermeßlich wachsen lassen, sondern auch den von Google.

mal sehen ob die datei texte bei google auftauchen, ich sperr den doch nicht aus hab eh genug bandbreite

@Kralle

eben vielleicht hilfts was

linux hat geschrieben:mal sehen ob die datei texte bei google auftauchen, ich sperr den doch nicht aus hab eh genug bandbreite

@Kralle

eben vielleicht hilfts was

Du kannst die großen Dateien ja fürs Erste einzeln via robots.txt aussperren.

Berichte auf jeden Fall mal, ob die Dokumente in den Index kommen! Würd mich echt interessieren, zumal ich öfters PDF-Dokumente ins Netz stelle, die ich einmal als ZIP (um bei den meisten Browsern einen automatischen Download zu generieren) und einmal direkt verlinke (hauptsächlich für SuMas). Damit ließe sich einiges vereinfachen, da es der "Otto-Normal-DAU-Surfer" oft nicht blickt, wie er ein PDF-Dokument speichert, das in einem Browserfenster geöffnet wird (für was könnte denn bloß die Diskette sein... ODER wie, meine Maus hat 2 Tasten??? ). Und so ganz nebenbei ist eine Doppelverlinkung auch nicht unbedingt schön

Bei mir war der Bot jedenfalls noch nicht, die direkt verlinkten PDFs sind jedoch indiziert.

ok ich schreibe mal einen eideutigen text in ein zip mal sehen ob das dann auftaucht


ich werde dann hier es posten

gruß

linux

Seit 4 Tagen läuft dieser Bot bei uns ebenfalls Amok und lädt eine einzige 64mb große wmv Datei ca. 20 x täglich runter. Die robot.txt ignoriert er geflissentlich. Langsam aber sicher werd ich sauer.

66.249.72.101 - - [08/Apr/2006:23:20:42 +0200] "GET /patchfiles//patches/WoW-1.9.4.5086-to-1.10.0.5195-deDE-patch.exe HTTP/1.1" 200 25682661 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"
66.249.72.101 - - [08/Apr/2006:23:26:09 +0200] "GET /patchfiles//patches/wow-1.9.4-to-1.10.0-engb-patch.exe HTTP/1.1" 200 25615902 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"
66.249.72.101 - - [08/Apr/2006:23:28:43 +0200] "GET /patchfiles//patches/wow-1.10.0-dede-patch.exe HTTP/1.1" 200 370089016 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)"

das ist gar nicht 300 MB wow patch den hat er nun gefunden!!!

zum glück ist das ein unlim. server

gruß

linux

was regt ihr euch auf ?
die dateien werden öffentlich zur verfügung gestellt und offensichtlich verlinkt - dann werden sie halt auch gefunden !