Seite 1 von 1

robots.txt nur für user sperren

Verfasst: 19.07.2009, 10:29
von melanieklenk
Das möchte ich. Bevor hier Diskussionen auftreten nach dem Grund.

Wenn jemand Sicherheitsmäßig etwas "anstellen" will, schaut er einfach mal da rein und sieht dann eventuell ordner die er nicht sehen soll.

THX
Melli.

Verfasst:
von

Re: robots.txt nur für user sperren

Verfasst: 19.07.2009, 10:40
von Mork vom Ork
melanieklenk hat geschrieben:Das möchte ich.
Das solltest du lassen, sonst stellst du dir früher oder später selbst ein Bein. Außerdem ist es die Mühe nicht wert.
Wenn jemand Sicherheitsmäßig etwas "anstellen" will, schaut er einfach mal da rein und sieht dann eventuell ordner die er nicht sehen soll.
Ordner, die privater Natur und nicht für Besucher gedacht sind, haben in der robots.txt nichts zu suchen. Die robots.txt ist keine Schutzvorrichtung, sondern eine Arbeitshilfe für Suchmaschinen und somit in gewisser Hinsicht sogar explizit für öffentlich zugängliche Bereiche vorgesehen.

Mit einer Verheimlichung der robots.txt irritierst du, wenn überhaupt, nur Skriptkiddies; über deren Niveau sollten deine Sicherheitsmaßnahmen erhaben sein. Du investierst damit nur Arbeit an einer Stelle, an der es überhaupt nichts bringt.

Verfasst: 19.07.2009, 10:43
von e-fee
Die Ordner kannst Du beispislweise auch mit 'nem Passwort schützen, wenn die keiner sehen soll.

Verfasst: 19.07.2009, 18:11
von bennos
ich spinne mal eine lösung zusammen.
würde gehen, wenn du den useragent immer erkennst und auf dessen basis dann zugriff erteist oder eben nicht. Sowas würde gehen mit Browsecap.

einfach googlen.

Verfasst: 19.07.2009, 20:29
von scysys
Es gibt noch die Möglichkeit die Ordnernamen abzukürzen in der Robots.txt.

Statt Images z.b. /im

Dann solltest du aber drauf achten weil so auch URL´s die mit IM anfangen geblockt werden. Ist eine möglichkeit aber dennoch nicht empfehlenswert.