Seite 1 von 1

FollowSite (ro)bot

Verfasst: 18.03.2009, 11:42
von tgutteck
Kann mir mal jemand helfen. Ich möchte den FollowSite (ro)bot

siehe https://www.followsite.com/bot.html aussperren.

Wie kann man dies anstellen?

Verfasst:
von

Verfasst: 18.03.2009, 11:50
von JohnBi
User-agent: FollowSite
Disallow /

Verfasst: 18.03.2009, 11:52
von tgutteck
klappt leider nicht, der ignoriert die robots.txt

Verfasst: 18.03.2009, 12:15
von JohnBi

Code: Alles auswählen

     RewriteCond %{HTTP_USER_AGENT} FollowSite
     RewriteRule ^.*$ X.html [L]
und für X.html setzte dem eine HTML Datei vor, wo nichts drauf ist.

Verfasst: 18.03.2009, 12:24
von tgutteck
Vielen Dank JohnBi!

Verfasst: 03.06.2009, 14:14
von WilliWusel
Muss x.html auf der obersten Ebene liegen oder kann man auch einen Pfad angeben, z.B.

RewriteRule ^.*$ https://www.testseite.de/leer.html [L]

Hab leider nicht so viel Ahnung von diesen Regeln... :oops:

Verfasst: 03.06.2009, 14:44
von luigip
Es ist doch schwachsinnig eine leere Seite auszuliefern.
Aussperren und gut isses.

Code: Alles auswählen

RewriteRule ^.*$ - [F]