Robots und Domains
Verfasst: 18.06.2004, 13:51
Hallo
ich habe zwei Domains z.B.
www.first.de
www.second.de
die in dem gleichen Webpaket meines Providers liegen.
Ich glaub das heißt Alias-Domain, oder ?
wie kann ich das in der Robots.txt steuern das die Bots keine Seite www.first.de/second/info.html spidern.
Langt es wenn ich
DISALLOW: /second/
in der robots.txt untere www.first.de/ angebe ?
Spidern die bots dann unter der angegebenen root
www.second.de
Ich möchte halt das
www.second.de/index.html indexiert wird und nicht
www.first.de/second/index.html
Danke für eure Tipps
Gruß JR-Ewing
ich habe zwei Domains z.B.
www.first.de
www.second.de
die in dem gleichen Webpaket meines Providers liegen.
Ich glaub das heißt Alias-Domain, oder ?
wie kann ich das in der Robots.txt steuern das die Bots keine Seite www.first.de/second/info.html spidern.
Langt es wenn ich
DISALLOW: /second/
in der robots.txt untere www.first.de/ angebe ?
Spidern die bots dann unter der angegebenen root
www.second.de
Ich möchte halt das
www.second.de/index.html indexiert wird und nicht
www.first.de/second/index.html
Danke für eure Tipps
Gruß JR-Ewing