msn bot 0,3

Beitrag von **nupe** » 22.11.2004, 12:23

produzierte seit dem 18.11 bis heute 4800 hits und 1,3 GB traffic..

nur mal so zur info - und das bei einem forum was eher weniger besucht wird /ca 250 besucher p.T.)

das muss man sich ja schon fast überlegen den auszuklammern...

von **Anzeige von ABAKUS** »

Beitrag von **bull** » 22.11.2004, 12:26

User-Agent: msnbot
crawl-delay: xxx

xxx auf einen ausreichend hohen Wert (Angabe in Sekunden) zu setzen sollte das Problem beheben.

Beitrag von **nupe** » 22.11.2004, 12:38

dank, werd ich mal einbauen..