.htaccess schliesst auch gute UA aus - why?

Beitrag von **sofasurfin** » 22.11.2005, 16:31

Hallo,

ich schliesse mit folgender .htaccess erfolgreich einige böse Bots u.a. aus, nur leider zu erfolgreich, da nun 2 wahrscheinlich normale User Agents auch draussenbleiben:

Code: Alles auswählen

Mozilla/4.0 &#40;compatible; MSIE 6.0; Windows NT 5.1; SV1; iebar; acc=jocker&#41;
Mozilla/4.0 &#40;compatible; MSIE 6.0; Windows NT 5.1; 1&1 Internet AG by USt; CustomToolbar.com; SV1&#41;

... ich finde aber selbst nach einschlägigem studium meiner .htaccess nicht die Regel welche dafür verantwortlich ist. Vielleich hat einer von euch den Tipp, ich bin nun nach meinem letzten Versuch ziemlich ratlos...

Code: Alles auswählen

RewriteEngine On
RewriteRule !sandbox\.php - &#91;C&#93; 

# -----------------------------------------------------------------------------
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*attach.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*BackWeb.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Baiduspider.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Bandit.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*BatchFTP.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*BlackWidow.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Bot\mailto&#58;craftbot@yahoo.com.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Buddy.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*ChinaClaw.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Collector.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Copier.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*cupriBOT.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Custo.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*DISCo.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Download\Demon.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Download\Wonder.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Downloader.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Drip.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*eCatch.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*EirGrabber.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*EmailSiphon.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*EmailWolf.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*EuripBot.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Express\WebPictures.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*ExtractorPro.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*EyeNetIE.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*FileHound.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*FlashGet.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*GetRight.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*GetSmart.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*GetWeb!.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Go!Zilla.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Go-Ahead-Got-It.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*gotit.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Grabber.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*GrabNet.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Grafula.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*grub-client.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*HMView.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*HTTrack.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Image\ Stripper.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Image\ Sucker.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*InterGET.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Internet\Ninja.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Iria.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Jakarta.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*JetCar.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*JOC.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*JustView.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*larbin.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*LeechFTP.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*lftp.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*libwww-perl.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*likse.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*LinkWalker.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Mag-Net.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Magnet.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Mass\Downloader.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Memo.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*MIDown\tool.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Mirror.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Mister\PiX.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Navroad.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*NearSite.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Net\Vampire.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*NetAnts.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*NetSpider.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*NetZIP.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Ninja.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*NPBot.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Octopus.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Offline\ Explorer.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Offline\ Navigator.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*PageGrabber.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Papa\Foto.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*pavuk.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*pcBrowser.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Pockey.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Pompos.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Poppelsdorf.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*psbot.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Pump.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*RealDownload.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Reaper.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Recorder.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*ReGet.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Siphon.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*sitecheck\.internetseer\.com.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*SiteSnagger.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*SmartDownload.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Snake.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*SpaceBison.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Stripper.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Sucker.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*SuperBot.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*SuperHTTP.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Surfbot.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*SurveyBot.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*tAkeOut.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Teleport.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Vacuum.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*VoidEYE.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*VoilaBot.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Web\Image\Collector.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Web\Sucker.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebAuto.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebCopier.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebFetch.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebGo\ IS.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebLeacher.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebReaper.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebSauger.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Website\ eXtractor.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Website\ Quester.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Webster.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebStripper.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebWhacker.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WebZIP.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Wget.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Whacker.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Widow.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*WWWOFFLE.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Xaldon.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Zeus.*$ &#91;NC,OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*ZipppBot.*$ &#91;NC,OR&#93;
# Omni-Explorer
RewriteCond %&#123;REMOTE_ADDR&#125; ^64.71.131.113. &#91;OR&#93;
RewriteCond %&#123;REMOTE_ADDR&#125; ^65.19.150.218. &#91;OR&#93;
RewriteCond %&#123;REMOTE_ADDR&#125; ^65.19.150.242. &#91;OR&#93;
RewriteCond %&#123;REMOTE_ADDR&#125; ^65.19.150.253.
#
RewriteRule ^&#40;.*&#41;$ http&#58;//www.domain.de/sandbox.php &#91;R=301&#93;

von **Anzeige von ABAKUS** »

Beitrag von **Caterham** » 23.11.2005, 13:56

Ja,

RewriteCond %{HTTP_USER_AGENT} ^.*JOC.*$ [NC,OR]

und

RewriteCond %{HTTP_USER_AGENT} ^.*Custo.*$ [NC,OR]

Beitrag von **sofasurfin** » 24.11.2005, 13:54

vielen, vielen Dank!