habe mal wieder eine Frage:
Wir haben ein Verzeichnis welches inzwischen aus ca. 220.000 Seiten besteht. Bis vor 4 oder 5 Wochen hat Google unsere Website gleichmässig gespidert. Inzwischen sind ca. 48.000-50.000 im Index.
... und das nun schon seit Wochen konstant.
Kann es sein dass Google ab 50.000 Seiten erst einmal eine Pause einlegt??? Falls ja, wann geht`s weiter?
Habe auf jeden Fall zu der Zeit auch die Session-ID-Funktion überarbeitet und heute vorsichtshalber wieder die alte Version online gestellt. (vielleicht lag es ja daran)...
220k? lol, sind die restlichen 4 Mrd. Seiten auch von Dir?
50k sind schon eine ganze menge. du brauchst mehr externe links/ mehr PR, dann sollte es funktionieren. möglicherweise musst du auch erst einen gewissen status bei google (authorität) erlangen. mach dem bot klar, dass deine seiten es wert sind, gespidert zu werden.