kann mir vielleicht jemand mitteilen, warum der Googlebot ca. jede Woche einmal bei mir vorbei kommt aber immer nur die index.php ausliest?
In der robots.txt habe ich ihn nicht ausgesperrt, soviel ist klar. Ich sehe nur, dass er die robots.txt und noch eine Seite liest.
Kann es vielleicht daran liegen, dass wir sehr neu sind (seit ein paar Wochen bei Google angemeldet und noch nicht ordentlich gescannt worden) und der Googlebot nur durch Zufall ab und an auf unsere Seite ist und uns eigentlich garnicht/noch nicht scannen will?
von mode-rewrite hatte ich ja bislang noch ueberhaupt keine Ahnung - jetzt hats geklappt.
Und denkst du das hilft mir jetzt evtl. mit dem Googlebot oder muss ich mich jetzt wirklich auf laengere Wartezeiten einstellen oder kann man den noch irgendwie puschen, damit er ueberhaupt mal das scannen anfaengt ??