Seite 1 von 1

Robots.txt für Besucher sperren

Verfasst: 30.11.2003, 16:28
von Waldeule
Hallo!

Ich würde gerne den Zugriff auf meine robots.txt für die Besucher meiner
Seite sperren. Ist das per htaccess möglich, so dass die Suchmaschinen-Spider die robots.txt noch finden, und wenn ja, wie?

Verfasst:
von

Verfasst: 01.12.2003, 01:09
von Halli
Waldeule,

wozu soll das denn gut sein ??? Wenn Du einzelne Unterverzeichnisse Deiner Domain gegen freie Besucherzugriffe sperren willst. o.k. das seh ich ein. Aber die robots.txt selbst ??? Ich meine, das macht keinen Sinn!

Verfasst: 01.12.2003, 09:40
von RW
Per htaccess den Referer auswerten und eine Liste der zugelassenden Suma einbauen. Diese Regel trifft dann nur auf deine Robots.TXT zu.

Wobei man einen Referer (auch IP ) vortäuschen kann. Also wenn Jemand Deine "geschützten Bereich" sehen will macht er es.


www.webmasterworld.com/forum92/323-2-15.htm

RW