ABAKUS

jetzt pingelig, robots.exe ist vermutlich ne robots.txt

immer noch nein.

Wenn du das Wasser im Badezimmer, robots.txt abdrehst kommt kein Tropfen aus der Dusche.

Ich weiß nicht ich weiß nicht
Die robots.txt sagt Google, die disallow-Pages auszuschliessen.
Aber warum sollte ein externer Link auf eine ausgeschlossene Seite nicht trotzdem dem Linkpop der Domain selbst dienen. Vielleicht ist Google ja doch nett

Weil Google /cgi-bin/Skriptname.pl?id=12345 nicht kennt weil der nette Googlebot die Seite nicht besuchen darf. Hast du Ihm doch verboten

koboxumi hat geschrieben:Weil Google /cgi-bin/Skriptname.pl?id=12345 nicht kennt weil der nette Googlebot die Seite nicht besuchen darf. Hast du Ihm doch verboten

Falsch, man könnte auch sagen: Unausrottbare Fehlansicht.

google kennt die Url, falls diese verlinkt ist - nur nicht den Inhalt. Das ist im übrigen robots-konform.

Die Url kann sogar einen fetten PR haben. Da aber kein Inhalt bekannt ist, kann der PR nicht an andere Seiten auf der Domain weitergegeben werden. Das Ding ist also eine PR-Sackgasse. Und ob das aus solchen Sackgassen heraus irgendwie auf die Domain weitergerechnet wird, das weiß wohl nur google.

Machts doch einen Test: Neue Domain, nur eine index.html, eine von dort verlinkte Unterseite, die per robots.txt gesperrt ist. Dann auf diese Unterseite einen fetten Link setzen - und sehen, ob google nicht bloß die robots.txt, sondern zusätzlich die Startseite crawlt.