Die robots.txt kann sehr gefaehrlich sein, je nachdem wie sie interpretiert wird. Google hat ja den robots.txt "Standard" etwas aufgebohrt, laesst jedoch im Unklaren ob es moeglich ist nur page.php?hase=huepf rauszuwerfen, und wenn ja wie muss ich das in der robots.txt angeben, er soll aber NICHT die page.php rauswerfen... weisst Du es [mir ist das echt zu riskant, angesichts der Probleme die Google sonst so hat trau ich denen noch einige Fehler mehr zu..]? Ansonsten widerspricht sich Google recht gut, denn auf der Seite steht mal was von 24h, dann von 48h, dann von 5-7 Tagen. Wer soll da noch durchblicken

Und einige berichten von einigen Wochen..