RewriteCond %{HTTP_USER_AGENT} FAST Enterprise Crawler [NC]
RewriteRule !robots\.txt - [F,L]
ist das so in ordung´?
Archiv
Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.
Die Suche ergab 7 Treffer
- 14.08.2005, 19:00
- Forum: Spiders / Robots Themen
- Thema: FAST Enterprise Crawler 6 used by T-Info BI cluster
- Antworten: 3
- Zugriffe: 3127
- 14.08.2005, 18:07
- Forum: Spiders / Robots Themen
- Thema: FAST Enterprise Crawler 6 used by T-Info BI cluster
- Antworten: 3
- Zugriffe: 3127
- 25.07.2005, 13:37
- Forum: Spiders / Robots Themen
- Thema: Muscat Ferret
- Antworten: 2
- Zugriffe: 1533
Muscat Ferret
Hallo, zum sperren reicht die Info.. Danke übrigens 
Aber ist es wieder so ein Bot der nur an Content kommen will und Adsense drauf klatscht oder ist es eine richtge Suma ?
Die HP geht nicht von dem
Aber ist es wieder so ein Bot der nur an Content kommen will und Adsense drauf klatscht oder ist es eine richtge Suma ?
Die HP geht nicht von dem
- 24.07.2005, 10:09
- Forum: Spiders / Robots Themen
- Thema: Muscat Ferret
- Antworten: 2
- Zugriffe: 1533
Muscat Ferret
Hallo zusammen, hat jemand eine Ahnung was es mit dem Bot Muscat Ferret auf sich hat? gut / böse ?
Und wie sperrt man ihn ?
bzw das ich nicht immer nachfragen muß.. auf was muß man denn generell achten wenn man bots sperren möchte?
mfg
Und wie sperrt man ihn ?
bzw das ich nicht immer nachfragen muß.. auf was muß man denn generell achten wenn man bots sperren möchte?
mfg
- 23.07.2005, 18:58
- Forum: Spiders / Robots Themen
- Thema: WWWeasel Robot v1.00 (http://wwweasel.de)
- Antworten: 37
- Zugriffe: 9418
Re: WWWeasel Robot v1.00 (http://wwweasel.de)
Hallo Garfield und Danke für den Tip.Garfield hat geschrieben:Hi,
du solltest den in der .htaccess sperren, dongdong.
Einen Beitrag über deinem wurde die Lösung bereits verraten.
RewriteCond %{HTTP_USER_AGENT} Weasel [NC]
RewriteRule !robots\.txt - [F,L]
- 22.07.2005, 18:25
- Forum: Spiders / Robots Themen
- Thema: WWWeasel Robot v1.00 (http://wwweasel.de)
- Antworten: 37
- Zugriffe: 9418
WWWeasel Robot v1.00 (http://wwweasel.de)
Vielen Dank
- 22.07.2005, 18:01
- Forum: Spiders / Robots Themen
- Thema: WWWeasel Robot v1.00 (http://wwweasel.de)
- Antworten: 37
- Zugriffe: 9418
