Seite 1 von 2
Warnung vor 217.71.160.33
Verfasst: 11.04.2005, 21:35
von bull
User-agent: telnet0.1
noone@example.org
wollte spidern, aber die Kleinbuchstabenfalle war mal wieder effektiv
Alles andere bitte selbst herausfinden!
z.B. mit https://<ip>
Verfasst:
von
Content Erstellung von
ABAKUS Internet Marketing
Ihre Vorteile:
- einzigartige Texte
- suchmaschinenoptimierte Inhalte
- eine sinnvolle Content-Strategie
- Beratung und Umsetzung
Jetzt anfragen:
0511 / 300325-0
Warnung vor 217.71.160.33
Verfasst: 11.04.2005, 22:31
von Airport1
Was meinst Du mit "Kleinbuchstabenfalle", hoert sich interessant an?
Heisst das, "nicht-genannte-aber-bekannte-Person" sammelt auf diese Weise MOEGLICHERWEISE Rezepte, also entfuehrt Content und stellt ihn dann mittels Dialer wiederum zur Verfuegung?
Warnung vor 217.71.160.33
Verfasst: 12.04.2005, 06:15
von bull
Kleinbuchstabenfalle
Bis auf wenige Ausnahmen sind User-agents, die mit Kleibuchstaben beginnen, nicht legitim:
https://www.abakus-internet-marketing.d ... rt-45.html (dritte von oben)
Was "nicht-genannte-aber-bekannte-Person" mit meinem Content machen würden, weiß ich nicht - ich weiß nur, daß mein Content da sicher nicht gut aufgehoben ist.

Verfasst:
von
SEO Consulting bei
ABAKUS Internet Marketing Erfahrung seit 2002
- persönliche Betreuung
- individuelle Beratung
- kompetente Umsetzung
Jetzt anfragen:
0511 / 300325-0.
Verfasst: 12.04.2005, 13:20
von Moddy
Scheisse, der ist jeden Tag bei mir
Danke dir Bull, "kleinbustabenfalle" ist also?:
RewriteCond %{HTTP_USER_AGENT} ^[a-z0-9]+
RewriteCond %{HTTP_USER_AGENT} !^msnbot
RewriteCond %{HTTP_USER_AGENT} !^contype
RewriteCond %{HTTP_USER_AGENT} !^wwwster
RewriteCond %{HTTP_USER_AGENT} !^ia_archiver
RewriteCond %{HTTP_USER_AGENT} !^arianna\.libero
Warnung vor 217.71.160.33
Verfasst: 12.04.2005, 15:51
von sean
Ist der jetzt für kostenlose Kochrezeptanbieter gefährlich oder für alle?
sean
Warnung vor 217.71.160.33
Verfasst: 12.04.2005, 15:53
von bull
Ja, am besten in eigenen Abschnitt packen:
Code: Alles auswählen
RewriteCond %{HTTP_USER_AGENT} ^[a-z0-9]+
RewriteCond %{HTTP_USER_AGENT} !^msnbot
RewriteCond %{HTTP_USER_AGENT} !^ia_archiver
RewriteCond %{HTTP_USER_AGENT} !^contype
RewriteCond %{HTTP_USER_AGENT} !^googlebot\-urlconsole
RewriteCond %{HTTP_USER_AGENT} !^wwwster
RewriteCond %{HTTP_USER_AGENT} !^ia_archiver
RewriteCond %{HTTP_USER_AGENT} !^arianna\.libero
RewriteCond %{HTTP_USER_AGENT} !^vlsearch
RewriteRule ^.*$ - [F]
EDIT: aktuellere Fassung
Re: Warnung vor 217.71.160.33
Verfasst: 12.04.2005, 16:06
von Moddy
sean hat geschrieben:Ist der jetzt für kostenlose Kochrezeptanbieter gefährlich oder für alle?
sean
Ich bin kein kostenloser rezepte Anbieter und mir geht er auch auf'n Sack
@Bull
Vielen Dank

Warnung vor 217.71.160.33
Verfasst: 12.04.2005, 16:34
von sean
OK, danke.
sean
Warnung vor 217.71.160.33
Verfasst: 13.04.2005, 07:27
von warry
Sehr aktiv, die Rezept-Spezies.
Heute nacht auf mehreren Domains rund 5000 Seiten gezogen, das kann nur was Böses werden.
Jetzt sind sie jedenfalls draussen.
Greets
warry
Warnung vor 217.71.160.33
Verfasst: 13.04.2005, 07:59
von mario
@bull
danke Bull für die Info. Es wäre sicher für alle die hier mitlesen interessant, wenn Du mal alle Ausschlussregeln die z.Z. wichtig sind, hier in einer aktuellen Liste posten könntest. Das würde sicher vielen dienen.
Was kann man bedenkenlos übernehmen? Alle folgenden, oder gibt es noch eine ganze Stange mehr? Habe mal versucht, Deine geposteten "Bösewichte" zusammenzufassen:
RewriteCond %{HTTP_USER_AGENT} ^[a-z0-9]+
RewriteCond %{HTTP_USER_AGENT} !^msnbot
RewriteCond %{HTTP_USER_AGENT} !^ia_archiver
RewriteCond %{HTTP_USER_AGENT} !^contype
RewriteCond %{HTTP_USER_AGENT} !^googlebot\-urlconsole
RewriteCond %{HTTP_USER_AGENT} !^wwwster
RewriteCond %{HTTP_USER_AGENT} !^ia_archiver
RewriteCond %{HTTP_USER_AGENT} !^arianna\.libero
RewriteCond %{HTTP_USER_AGENT} !^vlsearch
RewriteCond %{HTTP_USER_AGENT} ^Web [OR]
RewriteCond %{HTTP_USER_AGENT} ^HLoader [OR]
RewriteCond %{HTTP_USER_AGENT} Lite\ Bot [OR]
RewriteCond %{HTTP_USER_AGENT} ^Demo\ Bot [OR]
RewriteCond %{HTTP_USER_AGENT} ^Production\ Bot [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mozilla\/3\.0\ \(compatible\) [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mozilla\/4\.0\ \(compatible\) [OR]
RewriteCond %{HTTP_USER_AGENT} research [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^Full\ Web\ Bot [OR]
RewriteCond %{HTTP_USER_AGENT} ^CherryPicker [OR]
RewriteCond %{HTTP_USER_AGENT} ^Franklin [OR]
RewriteCond %{HTTP_USER_AGENT} Extract [NC,OR]
RewriteCond %{HTTP_USER_AGENT} MFC\ Foundation\ Class\ Library [OR]
RewriteCond %{HTTP_USER_AGENT} DTS\ Agent [OR]
RewriteCond %{HTTP_USER_AGENT} ^Industry\ Program [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mac\ Finder [OR]
RewriteCond %{HTTP_USER_AGENT} ^Program\ Shareware [OR]
RewriteCond %{HTTP_USER_AGENT} locator [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^[A-Z]Surf [OR]
RewriteCond %{HTTP_USER_AGENT} ^[A-Z]Browse [OR]
RewriteCond %{HTTP_USER_AGENT} ^WEP\ Search [OR]
RewriteCond %{HTTP_USER_AGENT} ^Missouri\ College [OR]
RewriteCond %{HTTP_USER_AGENT} ^HTTPLib [OR]
RewriteCond %{HTTP_USER_AGENT} Wavepluz [OR]
RewriteCond %{HTTP_USER_AGENT} ^Educate\ Search [OR]
RewriteRule ^.*$ - [F]
liebe Grüße
Mario
Warnung vor 217.71.160.33
Verfasst: 13.04.2005, 14:39
von mario
Frage zu Terminologie:
habe mal meine htaccess verglichen mit obiger Liste, dabei ist mir aufgefallen, dass meine Liste viele Einträge hat, die nach dem backslash einen Leerschlag aufweisen. Wie interpretiert das System die beiden Varianten? Kann man die Leerschläge stehen lassen?
Beispiel:
^Educate\ Search [OR] (mit Leerschlag)
^Educate\Search [OR] ( ohne Leerschlag)
Re: Warnung vor 217.71.160.33
Verfasst: 13.04.2005, 18:10
von robo
mario hat geschrieben:Frage zu Terminologie:
habe mal meine htaccess verglichen mit obiger Liste, dabei ist mir aufgefallen, dass meine Liste viele Einträge hat, die nach dem backslash einen Leerschlag aufweisen. Wie interpretiert das System die beiden Varianten? Kann man die Leerschläge stehen lassen?
Beispiel:
^Educate\ Search [OR] (mit Leerschlag)
^Educate\Search [OR] ( ohne Leerschlag)
Das erste Beispiel ist korrekt. Der Backslash dient dazu, das Leerzeichen zu escapen.
cu, Robo

Warnung vor 217.71.160.33
Verfasst: 13.04.2005, 18:24
von mario
danke robo... habe mich etwas umgesehen, da gibt es eine Menge mit beiden Schreibvarianten.
Grüße
Mario
Warnung vor 217.71.160.33
Verfasst: 13.04.2005, 21:17
von sean
was macht den der " [OR] " ?
Gruß
sean
Warnung vor 217.71.160.33
Verfasst: 14.04.2005, 09:20
von mario
was gibt es gegen diese .htaccess zu motzen? Habe mal ein paar Spammer zusammengestellt. Falls ihr Fehler entdeckt, bitte melden. auch Ergänzungen sind willkommen... los schlagt drauf
htaccess-Vorschlag