Indizierte Seiten hängen bei 30.000

[Eistee]

Hallo Forum,

bei einem Projekt (siehe Signatur) "hängt" die Anzahl der indizierten Seiten schon sehr lange bei +/- 30.000 Seiten. Und das trotz regelmässiger Botattakten, bei denen mal schnell 5000 Seiten gecrawlt werden

Irgendwie scheint es ein Limit zu geben, bzw für die neuen Seiten fliegen wieder alte raus. PR sollte aber für mehr als 30.000 Seiten genügen.

Woran könnte das Phänomen liegen?

[Andrag]

Dieses "Phänomen" kann ich bestätigen. Unsere Seite stagniert derzeit bei 35.000 indizierten Seiten.

mfg

[Jojo]

Was ist lange? Ich hab eine PR5-Seite mit über 200.000 indizierten Seiten. Und die Domain läuft erst seit 2 Monaten. Wenn du nun seit Wochen vergeblich auf weitere indizierte Seiten wartest:
- Besorg dir mehr starke PR-Links.
- Versuch es dem Spider noch einfacher zu machen alle Seiten zu spidern, indem du eine möglichst flache Hierarchie nutzt. Bei meiner vorgenannten Domain kann jede Seite von der Startseite aus mit maximal 4 Klicks erreicht werden.

@Eistee
Wieviele Seiten hat den die Domain. Soviel mehr als 30.000 sollten es doch nicht sein?

[bahnbilder]

Ein Testprojekt von mir stagniert zur Zeit (letzte 2 Wochen) auch bei seiner Seitenanzahl, die aber etwas höher liegt. Kann es sein, dass zur Zeit neue Unterseiten nicht so schnell in den Index kommen?

[Eistee]

@Jojo

Es sind auf keinen Fall schon alle Threads indiziert, und bei den Profilen auch erst ein paar 100.

[wulfo]

Hi momentan ist das glaube bei vielen so, es dauert längere Zeit bis Google die Seiten freigibt.

´wir haben festgestellt das der Spider da wahr und viele Seiten gespidert hat, sind aber noch nicht im Index.

Wahr bei dem anderen Projekt auch so erst 2 wochen später wahren die Seiten im Index.
Haben vieleicht doch auch Probleme mit den Datenbanken.

msn ist da zur Zeit schneller.