ich stehe im Moment vor einem Problem mit der Indizierung eines unserer Projekte.
Wir betreiben ein Projekt, welches rund 450.000 Informationsseiten aufweist.
Diese Informationsseiten sind nur über eine Suchmaske erreichbar.
Sprich Suche absetzen -> Resultset mit passenden Informationsseiten wird ausgegeben.
Leider ist es aus rechtlichen Gründen nicht möglich, für die Indizierung der Informationsseiten eine Art Sitemap oder auch Übersichtsseite aller vorhandenen Informationsseiten zu erstellen.
Auch eine XML sitemap ist leider nicht möglich, da ein zur Verfügungstellen aller Informationsseiten wiederum rechtlich nicht möglich ist.
Meine Frage ist nun ob eine Möglichkeit bekannt ist, Google trotzdem Zugriff auf alle 450.000 Seiten zu geben, OHNE eine komplett Übersicht zum Indizieren zu erstellen?
Die Inhaltseiten selbst sind alle öffentlich zugänglich und befinden sich nicht in einem geschützten Bereich.
Über etwaige Tipps oder Ideen wäre ich sehr dankbar.
Ja, das geht, die ganzen Wissenschaftsverlage und andere machen dies bei kostenpflichtigen Inhalten so. Du kannst ja entsprechende Seiten in der Form, wie du sie indiziert haben möchtest, erstellen aber nur dem googlebot per htaccess Zugriff gewähren. Wie das genau geht, sodass das von google akzeptiert wird(nicht als cloaking interpretiert wird) und wirklich nur der googlebot Zugriff hat(du also noch die ip des bots prüfst,...) weiß ich nicht; es dürfte aber Anleitungen dazu, vielleicht von google selber geben.