Spider-Verhalten bei sehr großen Seiten - Eure Erfahrung!?
Verfasst: 01.03.2006, 11:54
Wir haben eine sehr großes Portal neu veröffentlicht mit mehr als 1 Milllion Seiten, guter Content, "statisches" HTML mit einer vernünftigen Struktur (max 4 Ebenen) und einer vernüftigen Verlinkung der einzelnen Seiten untereinander.
Nun ist diese Domain sehr neu und soll von den Spidern indexiert werden. Wie ist eure Erfahrung diesbzgl.???
Aktueller Status:
Google: holte zu Beginn ca. 10.000 Seiten pro Tag, jetzt 1.000/Tag
MSN: zu Beginn 2.000/Tag, jetzt sehr schleppend
Yahoo: konstant ca. 1.500/Tag, aber wiederholt oft die gleichen Seiten
Wie sind eure Erfahrungen?
Wie können wir das ganze Beschleunigen, ich kenne bisher nur die Möglichkeit mehr Backlinks zu generieren...
Nun ist diese Domain sehr neu und soll von den Spidern indexiert werden. Wie ist eure Erfahrung diesbzgl.???
Aktueller Status:
Google: holte zu Beginn ca. 10.000 Seiten pro Tag, jetzt 1.000/Tag
MSN: zu Beginn 2.000/Tag, jetzt sehr schleppend
Yahoo: konstant ca. 1.500/Tag, aber wiederholt oft die gleichen Seiten
Wie sind eure Erfahrungen?
Wie können wir das ganze Beschleunigen, ich kenne bisher nur die Möglichkeit mehr Backlinks zu generieren...

