robots.txt via 301 weiterleiten

[Beyond]

Hallo Community,

ich habe 2 Domains auf das gleich root-Verzeichnis laufen und möchte dennoch 2 unterschiedliche robots.txt einsetzen. Kann man daher die robots.txt in ein anderes Verzeichnis legen und der Suchmaschine via 301 in dieses Verzeichnis führen. Hat da jemand Erfahrung?

[chris21]

Ja, kann man machen.

mod_rewrite Beispiel:

Code: Alles auswählen

RewriteCond ${HTTP_HOST} ^www\.exampleB\.com$
RewriteRule ^robots.txt$ /foo/robots.txt [L]

Dann zieht er für Domain B die robots.txt aus dem foo ordner. URL bleibt aber www.exampleB.com/robots.txt

[Beyond]

Hi Chris,

danke für die Info, hilft mir weiter!