robots.txt & .htaccess.txt

[--zz--]

hallo,

ich habe zwar schon alle threads über die robots.txt gelesen, bin mir aber trotzdem noch etwas unsicher und will lieber nochmal nachfragen, ob alles richtig ist! bzw ob meine ziele auch durch die robots.txt umgesetzt werden.

Code: Alles auswählen

User-agent: *
Disallow: /agb.htm
Disallow: /kontakt.htm
Disallow: /phpcart/

agb.htm, damit rechtsanwälte nicht auf eventuelle ungereimtheiten in meiner agb aufmerksam werden!
kontakt.htm damit e-mail sammler meine email adressen nicht finden können (spam)
phpcart, hier werden die persönlichen kundendaten gespeichert und deshalb soll der ordner auch gesperrt werden.

nun zu meinen fragen:
1) ich meine mal gelesen zu haben, dass man keine dateien sondern nur ordner in der robots.txt sperren kann. stimmt das? denn dann müsste ich sie ja alle in einen ordner legen.
2) nicht alle bots halten sich an die robots.txt. dann würde es ja sinn machen, wenn ich den inhalt der robots.txt auch in die .htaccess.txt kopieren würde?
3) auf meinen produktseiten sehen die warenkorblinks folgendermassen aus: <a href="phpcart/phpcart.php?action=add&id=SE01&descr=produktname&price=22.00&quantity=1&pagename=https://www.meine-domain.de"><img border="0" src="bild.gif"></a> (es handelt sich um statische seiten und die infos werden per javascript an den warenkorb weitergeleitet) diese links sollten durch die sumas nich verfolgt werden. gibt es möglichkeiten, das über die robots.txt zu realisieren?

danke + gruss

[Pompom]

Ist soweit alles richtig.

zu 1.) Nein. Es lassen sich auch einzelne Dateien sperren
zu 2.) die .htaccess.txt heißt .htaccess. Wenn du den Inhalt nur kopierst, nutzt das gar nicht, da die .htaccess vom Apache Webserver ausgewertet wird und entsprechende (gültige) Regeln enthalten sollte.
zu 3.) ja, wenn du z.B. das Verzeichnis, in dem die phpcart.php liegt, sperrst.
Ansonsten hilft Sperren über die .htaccess für Googlebot's.
Das heißt dann aber normalerweise Cloaking und ist nicht gern gesehen.

[AskeT]

agb.htm, damit rechtsanwälte nicht auf eventuelle ungereimtheiten in meiner agb aufmerksam werden!

Mittels robots.txt kann man unter Umständen Spidern den Zugriff auf bestimmte Ordner untersagen, aber doch nicht Rechtsanwälten!

Es ist auch nicht erforderlich, dass sich Deine AGBs reimen. Du kannst sie definieren wie Du willst. Wenn irgendein Passus darin dem BGB widerspricht, ist er ohnehin nicht rechtswirksam.

(Keine Rechtsberatung, sondern eine Laienansicht)

Gruß
AskeT

[--zz--]

die .htaccess.txt heißt .htaccess

ups, gut zu wissen!

ja, wenn du z.B. das Verzeichnis, in dem die phpcart.php liegt, sperrst.
Ansonsten hilft Sperren über die .htaccess für Googlebot's.
Das heißt dann aber normalerweise Cloaking und ist nicht gern gesehen.

na dann lasse ich es besser. meine phpcart.php liegt ja im ordner /phpcart und dieser wird ja über die robots.txt gesperrt. allerdings bin ich mir nicht sicher, ob sich google auch an die robots.txt hält?

[--zz--]

Mittels robots.txt kann man unter Umständen Spidern den Zugriff auf bestimmte Ordner untersagen, aber doch nicht Rechtsanwälten!

ich möchte ja auch nur, dass die agb nicht in den suchmaschinen zu finden sind, damit rechtsanwälte die nach agb suchen, nur um fehler zu entdecken und anschliessend abmahnungen schreiben, meine agb nicht über sumas finden

[helixxx]

bei 8.350.000 Treffern wird er bestimmt nicht, sich nis nach hinten durch arbeiten.
Wo deine Seite erfahrungsgemäß sein wird.