Seite 1 von 1

robots.txt Frage :-/

Verfasst: 28.05.2009, 11:21
von zubl
Hallo zusammen habe eine für mich wichtige Frage undzwar habe ich 2 Domains die unterschiedliche Pfade haben.
Zunächst mal meine Ordner Struktur:

main (ordner)
datei
datei
datei
robots.txt
- neu (ordner)
- datei
- datei

also wie man sieht gibt es einen Ordner im Ordner "MAIN" sowie eine Robots.txt ... in dieser Robots.txt steht drin: "Disallow: /neu/"

Domain A hat den Pfad "/main" und Domain B hat den Pfad "/main/neu"

Jetzt seh ich es doch richtig dass niemals bei Google folgendes passieren kann: www.domaina.de/neu/bla.html richtig?

Wenn ich die Robots also jetzt bestehen lasse, wird dann trotzdem folgendes bei Google gelistet: www.domainb.de/bla.html ?

Es ist mir halt wichtig das unter der ersten Domain keine Listungen aus dem "neu" Ordner passieren sondern nur bei der zweiten Domain...

Bitte um eure Meinung

Verfasst:
von
SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002
  • persönliche Betreuung
  • individuelle Beratung
  • kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.


Verfasst: 28.05.2009, 12:31
von Beach-Baer
Vielleicht habe ich Deine Frage auch nicht richtig verstanden?

Aber, warum ordnest Du nicht Domain A dem Pfad /main zu und erstellt im Ordner /main eine robots.txt für diese Domain. Dann ordnest Du die Domain B den Pfad /neu zu und dort ebenfalls eine robots.txt. Dazu legst Du die Dateien aus dem Root jeweils in die dazugehörigen Verzeichnisse!

Und weiter:
Du kannst in den Google Webmaster Tools, im Abschnitt Robots, deine URLs zum Test eintragen und prüfen, ob diese gecrawlt werden können oder nicht.

Gruß Kay