Aber hallo ! Also ich VERLANGE richtig, häftig Traffic von MSN ! Das ist das MINDESTE, was MSN als Entschädigung für diesen deppenhaften Bot tun kann !
Na wenn man sich das Verhalten des Bots mal genau in den Logs anguckt, dann könnte man schon meinen "Das muss aber so auch nicht sein" ... muss ich wirklich xx male pro Tag die robots.txt lesen ? Oder ist es wichtig zu wissen, ob sich eine Seite pro Tag 30 mal ändert ? Ich denke nicht ...