Derzeit hab ich auf einer Seite ein Problem mit der Indexierung:
Es handelt sich grundsätzlich um einen Blog, für das eine Sitemap erstellt wurde. Die Indexierung klappt hier auch sehr gut (30 Minuten nach Artikelveröffentlichung im Index).
Nun hab ich in einem Unterverzeichnis ein Verzeichnis für Downloads angelegt - rund 500 Seiten mit unique Content. Diese werden jedoch von Google so gut wie gar nicht indexiert! Nach 3 Wochen sind 8 Seiten davon im Index. Das Hauptprojekt verweist mit einem Navilink von jeder Seite auf das Verzeichnis und es gibt auch Links, die auf Unterseiten des Verzeichnisses zeigen.
Könnte es daran liegen, dass das Verzeichnis mit den 500 Seiten nicht in der Sitemap.xml auftaucht? Diese Datei war einst nur für den Blog aufgesetzt. Ich finde dafür partout keine Erklärung und das wäre mein einziger Ansatz.
Wie alt ist denn die Domain? Wenn sie noch recht jung ist, kann es sein, dass 500 Seiten evtl. zu viel sind. Im Zweifel helfen einfach mehr externe Links.
Leg doch einfach eine separate sitemap dafür an. Ab einer gewissen Größenordnung ist es recht hilfreich sowohl eine vollständige xml als auch ne zusätzliche html zu unterhalten.