Frage zu robots.txt und Verweise
Verfasst: 07.02.2007, 11:47
Hallo!
Wie ich gelesesen habe, kann man mit der robots.txt bestimmen, von wem und was nicht indiziert werden soll.
Habe ich das richtig verstanden, das der Robot der Datei- und Verzeichnisstruktur folgt und nicht den Links?
Beispiel:
In der Navigation findet man den Link auf ../cnt/seite.php
Um die Indezierung zu verhindern, müsste ich
angeben, was ist aber, wenn ich so verlinke ?cnt=../cnt/seite.php
müsste ich dann nur
schreiben oder auch
Ich möchte nähmlich vermeiden, das dieser Link ?cnt=../cnt/seite.php indeziert wird, ich möchte aber schon die Seite indezieren.
In Google Webmastertools, wurde nähmlich ein Link dieser Art als Fehler angesehen, da ein ? vorkommt.
Wenn das gar nichts mit der robots.txt zu tun hat, wie kann ich dann verhindern, das der Link indeziert wird?
Obwohl, der Robot folgt doch den Links und geht dann in die Datei oder?
Verwirrte Grüße
NetLook
Wie ich gelesesen habe, kann man mit der robots.txt bestimmen, von wem und was nicht indiziert werden soll.
Habe ich das richtig verstanden, das der Robot der Datei- und Verzeichnisstruktur folgt und nicht den Links?
Beispiel:
In der Navigation findet man den Link auf ../cnt/seite.php
Um die Indezierung zu verhindern, müsste ich
Code: Alles auswählen
Disallow: /cnt/seite.php
müsste ich dann nur
Code: Alles auswählen
Disallow: *?
Code: Alles auswählen
Disallow: /cnt/seite.php
In Google Webmastertools, wurde nähmlich ein Link dieser Art als Fehler angesehen, da ein ? vorkommt.
Wenn das gar nichts mit der robots.txt zu tun hat, wie kann ich dann verhindern, das der Link indeziert wird?
Obwohl, der Robot folgt doch den Links und geht dann in die Datei oder?

NetLook