Robots und Domains

Beitrag von **JR-EWING** » 18.06.2004, 13:51

Hallo
ich habe zwei Domains z.B.
www.first.de
www.second.de

die in dem gleichen Webpaket meines Providers liegen.
Ich glaub das heißt Alias-Domain, oder ?

wie kann ich das in der Robots.txt steuern das die Bots keine Seite www.first.de/second/info.html spidern.

Langt es wenn ich
DISALLOW: /second/
in der robots.txt untere www.first.de/ angebe ?

Spidern die bots dann unter der angegebenen root
www.second.de

Ich möchte halt das
www.second.de/index.html indexiert wird und nicht
www.first.de/second/index.html

Danke für eure Tipps

Gruß JR-Ewing

von **Anzeige von ABAKUS** »

Hochwertiger Linkaufbau bei ABAKUS:

Google-konformer Linkaufbau
nachhaltiges Ranking
Linkbuilding Angebote zu fairen Preisen
internationale Backlinks

Wir bieten Beratung und Umsetzung.
Jetzt anfragen: 0511 / 300325-0

Beitrag von **Jörg** » 18.06.2004, 14:04

die Spider folgen den Links; wenn kein Link zu der Seite www.first.de/second/index.html führt, kann diese Adresse nicht gespidert werden, weil sie keine Kenntnis von ihr haben; sollte also ausreichen, dass du selbst keinen Link dorthin setzt sondern nur zu www.second.de

Beitrag von **LinkPop** » 18.06.2004, 14:12

JR-EWING,

Du kannst unter first DISALLOW: /second/ einsetzen. Das Verz. /second/ wird ja nur unter www.first.de gefunden. www.second.de startet in diesem Ordner und wird demzufolge auch gespidert, da die robots.txt hier ja nicht liegt.

von **Anzeige von ABAKUS** »

Beitrag von **JR-EWING** » 18.06.2004, 14:16

Danke für die schnellen Antworten

Beitrag von **fool** » 18.06.2004, 20:55

Hi,
kannst du nicht einfach für jeder deiner beiden Domains in den Ordner, wo die jeweiligen Dateien liegen eine eigene robots.txt legen.

Bei mir geht das auch, zwei Domains in einem Webpaket = multidomainfähig

Klappt wunderbar.

Gruß
fool