Hallo.
Für eine bessere Optimierung habe ich vorgeschlagen bekommen, einzelne Variablen in der Robots.txt auszuschließen. Nur frage ich mich, ob das auch wirklich funktionieren sollte. Denn die index.php gibt auch die Seiten aus, welche indiziert werden sollen! Da wollte ich mal um euren Rat fragen, ob das so geht:
Bitte.
Und Danke für die Info.
Dann sollte ich die Disallows nur für den Googlebot beschränken. Nicht, dass mir andere die komplette Index.php raus werfen. Das wäre fatal bei den vielen Themen, daher meine vorsichtige Frage - ich muss ganz sicher gehen.
Was mir noch ein kleinwenig Sorgen macht ist die Zeile "Disallow: /*&showtopic " Täusche ich mich oder was ist damit gemeint? Denn ich kann mich nicht entsinnen, wo das Verwendung findet, außer bei den richtigen Topics. Na und die sollten ja drinne bleiben.