Herzlich willkommen im Archiv vom ABAKUS Online Marketing Forum
Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.
Mist bei mir auch. Yahoo Slurp verursacht soviel 404 Last bis der Server down ist:Windy hat geschrieben:Nicht ganz. Der Ordner existiert ja nicht real, und außer der thread.html ist darin auch nichts erreichbar oder verlinkt, deswegen wundert mich das ja. Es gibt da nichts, der Spider erzeugt nur tonnenweise 404 Einträge in den Logs.
Code: Alles auswählen
RewriteCond %{HTTP_USER_AGENT} ^.*Yahoo.*$
RewriteRule .* - [F]
noch hält aber der server stand 
scheint so als würde er langsam aufgeben... es sind nur noch an die 40 die da rumstreunen, obwohl es fast nen monat immer um die 200 waren.Himura hat geschrieben:yahoo hat zur Zeit bei mir etwa 250 Bots rumlaufen (im forum)
