Seite 1 von 1

Per .htaccess spider, download-manager, spambots sperren

Verfasst: 28.05.2004, 10:20
von beku
Hi

Hab hier schon alles gelesen doch irgendwie verstehe ich es noch nicht ganz.
Was ich will ist:
Alle Bots zu seprren die nur unnötig Trafic verursachen
Download-Manager z.B. Leechget, Reget, FlashGet sperren
Verhindern das der User/Software die Seite komplett in einem Rutsch runterladen kann.
Die E-Mail Crawler sperre.

In der Robots.txt habe ich die ja alle drin nur ist das wohl nicht so der Hit, ich verstehe das mit der .htaccess nicht.

Kann mir jemand eine fertige .htaccess zeigen wo ich mich nach richten kann? ich habe hier schon eine probiert doch dann komme ich mit dem IE nicht mehr auf meinen Webspace.

Verfasst:
von
SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002
  • persönliche Betreuung
  • individuelle Beratung
  • kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.


Verfasst: 29.05.2004, 05:46
von bull
Beste Zusammenfassung ist noch immer
https://www.webmasterworld.com/forum13/687.htm
Man möge gefl. beachten, daß insbesondere sog. Download-Manager und Offline-Browser die Möglichkeit offerieren, den User-Agent selbst festzulegen, was durchaus immer wieder nette Mitbürger tun, wie ich oftmals feststellen kann, so daß das Einrichten einer "bot trap" unter Umständen nötig sein kann.

Verfasst: 30.05.2004, 04:22
von hard_pollux
@beku
ich hege ähnliche Wünsche und habe auch einiges ausprobiert, aber optimal war nix.
Hier gibt es allerdings eine gute Liste ungeliebter Zeitgenossen:

https://www.kloth.net/internet/badbots.php

ist zumindest ein Anfang.

Gruß
HardPollux