Ich habe zur Hauptdomain vor kurzem eine mobile XHTML Version unter einer .mobi Domain gestartet, bei der sich nun leider Probleme bei der robots.txt Datei ergeben haben.
In jenem Verzeichnis auf welche die mobi Domain zeigt liegt folgende robots.txt Datei.
Code: Alles auswählen
User-agent: Googlebot
Disallow: /
User-agent: Googlebot-Mobile
Disallow:
Code: Alles auswählen
User-agent: Googlebot-Mobile
Disallow: /
Auf der normalen Webdomain wird der mobile Bot sinnvollerweise ausgesperrt.
Auf der mobilen Domain wird der mobile Bot zugelassen, jedoch der normale Bot ausgesperrt.
Über das Google Webmastertool wurde mir die korrekte Funktion über die robots Analysfunktion bestätigt.
Nun zum Problem:
Vor einigen Tagen habe ich dann die mobi Startseite und einige Unterseiten im normalen Google Index gefunden, was ja aufgrund der robots Datei ja eigentlich nicht sein sollte.
Wenn jemand einen Tipp für mich hat, würde ich mich sehr freuen.
Danke und lg,
Max