FollowSite (ro)bot

Beitrag von **tgutteck** » 18.03.2009, 11:42

Kann mir mal jemand helfen. Ich möchte den FollowSite (ro)bot

siehe https://www.followsite.com/bot.html aussperren.

Wie kann man dies anstellen?

von **Anzeige von ABAKUS** »

Beitrag von **JohnBi** » 18.03.2009, 11:50

User-agent: FollowSite
Disallow /

Beitrag von **tgutteck** » 18.03.2009, 11:52

klappt leider nicht, der ignoriert die robots.txt

Beitrag von **JohnBi** » 18.03.2009, 12:15

Code: Alles auswählen

     RewriteCond %&#123;HTTP_USER_AGENT&#125; FollowSite
     RewriteRule ^.*$ X.html &#91;L&#93;

und für X.html setzte dem eine HTML Datei vor, wo nichts drauf ist.

Beitrag von **tgutteck** » 18.03.2009, 12:24

Vielen Dank JohnBi!

Beitrag von **WilliWusel** » 03.06.2009, 14:14

Muss x.html auf der obersten Ebene liegen oder kann man auch einen Pfad angeben, z.B.

RewriteRule ^.*$ https://www.testseite.de/leer.html [L]

Hab leider nicht so viel Ahnung von diesen Regeln...

Beitrag von **luigip** » 03.06.2009, 14:44

Es ist doch schwachsinnig eine leere Seite auszuliefern.
Aussperren und gut isses.

Code: Alles auswählen

RewriteRule ^.*$ - &#91;F&#93;