Wie findet Google Subdomains?

Beitrag von **jo.da** » 10.02.2009, 12:39

Hallo zusammen,

ich habe heute mal das invertierte Google-Problem.

In einer Subdomain habe ich einige Testseiten und es liegt auch ein robots.txt mit einem Verbot aller Spider in dem Verzeichnis.
Trotzdem tauchen bei Google auf einmal nahezu alle Unterseiten dieser Testdomain auf.

Wie kann den so was sein?

Es gibt nirgentwo einen Link auf diese Subdomain.

Grüße
Jo

von **Anzeige von ABAKUS** »

Beitrag von **D@luxe** » 10.02.2009, 12:57

beinhaltet diese Subdomain diverse Theme-Daten (bilder,css etc) z.b.: images.meinedomain.at... dann hast du die Links automatisch im Template...

Überprüfe nochmal deine robots.txt und lege sie auch in den root der Subdomain

Beitrag von **catcat** » 10.02.2009, 13:02

Die Subdomain mittels .htaccess/passwortschutz sperren?

von **Anzeige von ABAKUS** »

Beitrag von **JennyWeb** » 10.02.2009, 13:03

D@luxe hat geschrieben:beinhaltet diese Subdomain diverse Theme-Daten (bilder,css etc) z.b.: images.meinedomain.at... dann hast du die Links automatisch im Template...

Überprüfe nochmal deine robots.txt und lege sie auch in den root der Subdomain

mit

User-agent: *
Disallow: /verzeichnisname/

LG Jenny

Beitrag von **Modena** » 10.02.2009, 13:54

... vielleicht mit installierter Toolbar die Seiten angesurft?

Beitrag von **realloader** » 10.02.2009, 20:58

Hatte auch mal das Problem. Tauchen auf einmal Seite alla Test3/abc.html usw. auf. Problem war das die Versionen schon fast fertig waren, im WYSIWYG Browser oder halt mit FF und IE getestet wurden UND schon Adsense mit eingebaut war. Lösche mometan ca. 100 Seiten wöchentlich mit den WMT, aber die Kracke kramt immer weitere Seiten raus. Eben alle die adsense drinhaben und in Browsern auf meinem Rechner getestet wurden...