Mehrere Domains, ein Webspace, mehrere robots.txt??
Verfasst: 20.05.2005, 15:38
Hallo!
Ich habe mehrere Domains auf meinem Webspace:
www.gewerbe-portal.net
www.branchen-portal.net
www.automobil-portal.net
www.bilder-portal.net
ALLE diese Domains verlinken auf Unterordner auf meinem Webpace, z.B. https://www.haendler-portal.net/gewerbe-portal
In diesem Ordner ist eine Eingangsseite - unterschiedlich für die Suchmaschinen optimiert - welche auf die Domain www.haendler-portal.net (im Hauptordner) verweist.
Meine Frage: Muss ich in jedem Unterordner eine robots.txt Datei erstellen, wenn ich möchte, das ALLES gespidert wird? Oder reicht eine robots.txt im Hauptverzeichnis, auch wenn der Googlebot über die Unterverzeichnisse ins Hauptverzeichnis gelangt?
Ich habe mehrere Domains auf meinem Webspace:
www.gewerbe-portal.net
www.branchen-portal.net
www.automobil-portal.net
www.bilder-portal.net
ALLE diese Domains verlinken auf Unterordner auf meinem Webpace, z.B. https://www.haendler-portal.net/gewerbe-portal
In diesem Ordner ist eine Eingangsseite - unterschiedlich für die Suchmaschinen optimiert - welche auf die Domain www.haendler-portal.net (im Hauptordner) verweist.
Meine Frage: Muss ich in jedem Unterordner eine robots.txt Datei erstellen, wenn ich möchte, das ALLES gespidert wird? Oder reicht eine robots.txt im Hauptverzeichnis, auch wenn der Googlebot über die Unterverzeichnisse ins Hauptverzeichnis gelangt?