Seite 1 von 1

Robots und Domains

Verfasst: 18.06.2004, 13:51
von JR-EWING
Hallo
ich habe zwei Domains z.B.
www.first.de
www.second.de

die in dem gleichen Webpaket meines Providers liegen.
Ich glaub das heißt Alias-Domain, oder ?

wie kann ich das in der Robots.txt steuern das die Bots keine Seite www.first.de/second/info.html spidern.

Langt es wenn ich
DISALLOW: /second/
in der robots.txt untere www.first.de/ angebe ?

Spidern die bots dann unter der angegebenen root
www.second.de

Ich möchte halt das
www.second.de/index.html indexiert wird und nicht
www.first.de/second/index.html

Danke für eure Tipps

Gruß JR-Ewing

Verfasst:
von

Hochwertiger Linkaufbau bei ABAKUS:
  • Google-konformer Linkaufbau
  • nachhaltiges Ranking
  • Linkbuilding Angebote zu fairen Preisen
  • internationale Backlinks
Wir bieten Beratung und Umsetzung.
Jetzt anfragen: 0511 / 300325-0

Verfasst: 18.06.2004, 14:04
von Jörg
die Spider folgen den Links; wenn kein Link zu der Seite www.first.de/second/index.html führt, kann diese Adresse nicht gespidert werden, weil sie keine Kenntnis von ihr haben; sollte also ausreichen, dass du selbst keinen Link dorthin setzt sondern nur zu www.second.de

Verfasst: 18.06.2004, 14:12
von LinkPop
JR-EWING,

Du kannst unter first DISALLOW: /second/ einsetzen. Das Verz. /second/ wird ja nur unter www.first.de gefunden. www.second.de startet in diesem Ordner und wird demzufolge auch gespidert, da die robots.txt hier ja nicht liegt.

Verfasst:
von

Verfasst: 18.06.2004, 14:16
von JR-EWING
Danke für die schnellen Antworten

robots.txt

Verfasst: 18.06.2004, 20:55
von fool
Hi,
kannst du nicht einfach für jeder deiner beiden Domains in den Ordner, wo die jeweiligen Dateien liegen eine eigene robots.txt legen.

Bei mir geht das auch, zwei Domains in einem Webpaket = multidomainfähig

Klappt wunderbar.

Gruß
fool