ABAKUS

Hallo,

ich habe ein Problem mit Backlink-Check.de.
Der kammt tagtäglich und verursacht jede Menge Traffik

Beispiel aus dem access_log:
85.197.79.37 - - [02/Dec/2005:14:15:59 +0100] "GET /links/10.html HTTP/1.0" 200 21455 "-" "Backlink-Check.de (+https://www.backlink- check.de/bot.html)"

Meine bisherigen Einträge in der htaccess :
RewriteCond %{HTTP_USER_AGENT} ^Backlink [OR]
RewriteCond %{HTTP_USER_AGENT} ^Backlink* [OR]
RewriteCond %{HTTP_USER_AGENT} Backlink\-Check\.de* [OR]
RewriteCond %{HTTP_USER_AGENT} ^Backlink\-Check\.de [OR]

haben leider keinen Erfolg

Was mus ich ändern, um dem den Eintritt zu verwehren?

Ein schönes Wochenende wünscht Roland

Einer deiner Linkpartner wird diesen (guten,kostenlosen) Dienst nutzen, um seine Linkpartner "unter Kontrolle" zu halten.

Jeder Backlink wird täglich 1x geprüft, sooo viel Traffic kann das ja nicht sein

..warry, da muss ich Dir wiedersprechen. Mir ging der Bot auch mal auf dem Kecks, weil der sich ständig auf meinen Web breit gemacht hatt. Auch noch auf einem Web, wo es gar keinen Linktausch gibt (Links für Artikel)

Hab das dumme Ding ausgesprerrt.

@rolland
habe auf meinen Webserver IIS laufen, deshalb nützt Dir meine Lösung nichts.
Aber es gibt hier sicherlich genügend Leute die dein Stück Code berichtigen werden. Am besten Du sperrst die IP aus.

Sperre die IP "85.197.79.37"

Andererseits ist backlink-check aber ein verdammt gutes Tool und soviel Traffic verursacht der nicht, es sei denn deine Seiten sind > 100k

Hallo roland,

die Zeilen

RewriteCond %{HTTP_USER_AGENT} ^Backlink [OR]
RewriteCond %{HTTP_USER_AGENT} ^Backlink* [OR]
RewriteCond %{HTTP_USER_AGENT} Backlink\-Check\.de* [OR]
RewriteCond %{HTTP_USER_AGENT} ^Backlink\-Check\.de [OR]

lassen sich zu einer einzigen zusammenfassen:

RewriteCond %{HTTP_USER_AGENT} backlink [NC,OR]

Das [OR] natürlich nur angeben, wenn nachher auch noch RewriteConds folgen. RewriteEngine ist on; und eine RewriteRule hast Du natürlich auch definiert?

LG, Hobby-SEO

warry hat geschrieben:Einer deiner Linkpartner wird diesen (guten,kostenlosen) Dienst nutzen, um seine Linkpartner "unter Kontrolle" zu halten.

Jeder Backlink wird täglich 1x geprüft, sooo viel Traffic kann das ja nicht sein

Hallo Warry,
ob Traffik oder nicht. Es gibt einen nicht "eingeladenen Dauerbesucher".

Zum Traffik:
Er ist hoch

MFG
Roland

Hobby-SEO hat geschrieben:Hallo roland,

die Zeilen

RewriteCond %{HTTP_USER_AGENT} ^Backlink [OR]
RewriteCond %{HTTP_USER_AGENT} ^Backlink* [OR]
RewriteCond %{HTTP_USER_AGENT} Backlink\-Check\.de* [OR]
RewriteCond %{HTTP_USER_AGENT} ^Backlink\-Check\.de [OR]

lassen sich zu einer einzigen zusammenfassen:

RewriteCond %{HTTP_USER_AGENT} backlink [NC,OR]

Das [OR] natürlich nur angeben, wenn nachher auch noch RewriteConds folgen. RewriteEngine ist on; und eine RewriteRule hast Du natürlich auch definiert?

LG, Hobby-SEO

Hallo Hobby-SEO,

vielen Dank für Deine Antwort.

Ich werde die IP sperren. Hoffentlich nicht damit erreichen, daß viele Andere ausgesperrt werden.

Kurze Frage:
RewriteCond %{REMOTE_ADDR} ^85\.197\.79\.37 [OR]

Ist die Zeile so richtig, oder muss die anders aussehen (definiert) weden?

Mit freundlichen Grüßen
Roland

roland hat geschrieben:Kurze Frage:
RewriteCond %{REMOTE_ADDR} ^85\.197\.79\.37 [OR]

Ist die Zeile so richtig, oder muss die anders aussehen (definiert) weden?

Hallo Roland,

Zeile ist perfekt so (nachher muss halt wegen des [OR] noch zumindest eine weitere RewriteCond und schließlich eine RewriteRule folgen). Und da es sich wohl um eine feste IP handelt, wirst Du auch keine Unschuldigen aussperren. Weiß jetzt aber nicht, ob backlink-check.de auch noch über andere IPs verfügt.

Alternativ wäre auch Folgendes möglich:

<Limit GET POST>
order deny,allow
deny from 85.197.79.37
allow from all
</Limit>

LG, Hobby-SEO

Hobby-SEO hat geschrieben:

roland hat geschrieben:Kurze Frage:
RewriteCond %{REMOTE_ADDR} ^85\.197\.79\.37 [OR]

Ist die Zeile so richtig, oder muss die anders aussehen (definiert) weden?

Hallo Roland,

Zeile ist perfekt so (nachher muss halt wegen des [OR] noch zumindest eine weitere RewriteCond und schließlich eine RewriteRule folgen). Und da es sich wohl um eine feste IP handelt, wirst Du auch keine Unschuldigen aussperren. Weiß jetzt aber nicht, ob backlink-check.de auch noch über andere IPs verfügt.

Alternativ wäre auch Folgendes möglich:

<Limit GET POST>
order deny,allow
deny from 85.197.79.37
allow from all
</Limit>

LG, Hobby-SEO

Hallo Hobby-SEO,

vielen herzlichen Dank für Deine schnelle Antwort.

Meine htaccess sieht in Auszügen so aus:
[Auszug]
RewriteEngine On
RewriteCond %{REQUEST_FILENAME} !-f
RewriteRule ^typo3$ typo3/index_re.php
RewriteRule ^[^/]*\.html$ index.php

# "böse" bots, robots and spiders
. . .
. . .
. . .
RewriteCond %{HTTP_USER_AGENT} ^Atomz [OR]
RewriteCond %{HTTP_USER_AGENT} attach [OR]
RewriteCond %{HTTP_USER_AGENT} Azillo [OR]
#
RewriteCond %{HTTP_USER_AGENT} ^BaiDuSpider [OR]
RewriteCond %{HTTP_USER_AGENT} ^b2w* [OR]
RewriteCond %{HTTP_USER_AGENT} backlink [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^BackWeb [OR]
RewriteCond %{HTTP_USER_AGENT} ^Bandit [OR]
RewriteCond %{HTTP_USER_AGENT} ^BatchFTP [OR]
. . .
. . .
. . .
RewriteCond %{HTTP_USER_AGENT} ^ZyBorg*
#
RewriteRule ^.* - [F,L]
#
#
#
#
### Jetzt kommt es :
# diejenigen ohne user_agent herausfiltern und heraus halten!!!
# so wird Head und AOL durch gelassen
# diejenigen, die daa Fav-Icon mit leerem User-agent lesen, ebenfalls
# Pech haben diejenigen, deren Firewalleinstellungen keinen UserAgent-Namen(!!!) durchlassen!
# Das bewegt sich aber im Promillebereich!!! Diejenigen wissen auch *genau* was sie da tun UND:(!!!),
# wesshalb sie Ihre Firewalleinstellungen so gewählt haben, und haben das bewusst so getan!
# Die wissen auch aus o.g. Grunde ganz genau, weshab sie gewisse Inhalte aus dem Netz NICHT auf Ihrem Bildschirm angezeigt
# bekommen!!!
RewriteCond %{HTTP_REFERER} ^$ [NC]
RewriteCond %{HTTP_USER_AGENT} ^$ [NC]
RewriteCond %{THE_REQUEST} ^GET [OR]
RewriteCond %{THE_REQUEST} ^POST
RewriteRule !robots\.txt|favicon\.ico - [F]
### Ende der Datei .htaccess
### EOF
[/Auszug]

wo muss ich nun die von Dir genannten Zeilen hintun, damit Sie Ihre Arbeit erledigen?
<Limit GET POST>
order deny,allow
deny from 85.197.79.37
allow from all
</Limit>

Kommen diese Zeilen vor die letzten 7 Zeilen oder hinter die ersten 4 Zeilen der htaccess oder ganz an den Schluss der Datei?

Mit freundlichen Grüßen
Roland

Hallo Roland,

das ist nicht so genau - nur Dein Rewrite-Regelwerk darfst Du Dir halt nicht unterbrechen. Also am besten Du fügst die Zeilen am Ende nach

RewriteCond %{THE_REQUEST} ^POST
RewriteRule !robots\.txt|favicon\.ico - [F]

ein. Die deny-Regeln sind dann auch einfach erweiterbar - einfach die zu blockierenden IPs hinzufügen, z.B.

deny from 195.166.237
deny from 69.36.190.175

LG, Hobby-SEO

roland hat geschrieben: ### Jetzt kommt es :
# diejenigen ohne user_agent herausfiltern und heraus halten!!!
# so wird Head und AOL durch gelassen
# diejenigen, die daa Fav-Icon mit leerem User-agent lesen, ebenfalls
# Pech haben diejenigen, deren Firewalleinstellungen keinen UserAgent-Namen(!!!) durchlassen!
# Das bewegt sich aber im Promillebereich!!! Diejenigen wissen auch *genau* was sie da tun UND:(!!!),
# wesshalb sie Ihre Firewalleinstellungen so gewählt haben, und haben das bewusst so getan!
# Die wissen auch aus o.g. Grunde ganz genau, weshab sie gewisse Inhalte aus dem Netz NICHT auf Ihrem Bildschirm angezeigt
# bekommen!!!
RewriteCond %{HTTP_REFERER} ^$ [NC]
RewriteCond %{HTTP_USER_AGENT} ^$ [NC]
RewriteCond %{THE_REQUEST} ^GET [OR]
RewriteCond %{THE_REQUEST} ^POST
RewriteRule !robots\.txt|favicon\.ico - [F]

Boah,...OK

klingt für mich spannend aber sagt mir noch nichts.
Tut mir leid, das ich mich so in die Diskussion einmische, aber ich stelle mir gerade die Frage ob das eventuell auch für meine Seite interessant sein könnte. Könnt Ihr mir erklären, wozu dieses schnipselchen Code genau da ist?! Hacker (Spione) ausperren die nur...ja, die was machen wollen?

Danke schonmal für Eure Hilfe.

jabz.biz hat geschrieben:Könnt Ihr mir erklären, wozu dieses schnipselchen Code genau da ist?! Hacker (Spione) ausperren die nur...ja, die was machen wollen?

Hallo,

es geht z.B. um Content-Klau (und damit verbunden um das double-content-Problem), um E-Mail-Adressen-Sammler mit Spamabsicht, um Bots, die z.T. extrem viel Traffic verursachen, über die aber niemals auch nur ein einziger Besucher auf Deine Website kommt usw. usf.

Bull hat einen sehr lesenswerten Artikel für Einsteiger verfasst: https://www.abakus-internet-marketing.d ... -8573.html - ansonsten einfach ein bisschen hier im Spider- & Robots-Forum stöbern.

LG, Hobby-SEO

jabz.biz hat geschrieben:

roland hat geschrieben: ### Jetzt kommt es :
# diejenigen ohne user_agent herausfiltern und heraus halten!!!
# so wird Head und AOL durch gelassen
# diejenigen, die daa Fav-Icon mit leerem User-agent lesen, ebenfalls
# Pech haben diejenigen, deren Firewalleinstellungen keinen UserAgent-Namen(!!!) durchlassen!
# Das bewegt sich aber im Promillebereich!!! Diejenigen wissen auch *genau* was sie da tun UND:(!!!),
# wesshalb sie Ihre Firewalleinstellungen so gewählt haben, und haben das bewusst so getan!
# Die wissen auch aus o.g. Grunde ganz genau, weshab sie gewisse Inhalte aus dem Netz NICHT auf Ihrem Bildschirm angezeigt
# bekommen!!!
RewriteCond %{HTTP_REFERER} ^$ [NC]
RewriteCond %{HTTP_USER_AGENT} ^$ [NC]
RewriteCond %{THE_REQUEST} ^GET [OR]
RewriteCond %{THE_REQUEST} ^POST
RewriteRule !robots\.txt|favicon\.ico - [F]

Boah,...OK

klingt für mich spannend aber sagt mir noch nichts.
Tut mir leid, das ich mich so in die Diskussion einmische, aber ich stelle mir gerade die Frage ob das eventuell auch für meine Seite interessant sein könnte. Könnt Ihr mir erklären, wozu dieses schnipselchen Code genau da ist?! Hacker (Spione) ausperren die nur...ja, die was machen wollen?

Danke schonmal für Eure Hilfe.

Hallo jabz.biz,

im Forum gibt es dazu die Lösung
Ich habe immer eine Menge Traffik gehabt von User Agenten die n u r einen "-" (Minuszeichen) als Namen hatten (laut access_log).
Dankenswerter Weise habe ich dafür hier im Forum die o.g. Lösung erhalten.
Sie funktioniert.

MFG
Roland

Ok,...aber warum blockst Du die?! War der Traffic zu hoch? Was hat es mit dem Favicon auf sich?! so ganz isses mir noch nicht klar.

jabz.biz hat geschrieben:Ok,...aber warum blockst Du die?! War der Traffic zu hoch? Was hat es mit dem Favicon auf sich?! so ganz isses mir noch nicht klar.

Hallo,

https://www.abakus-internet-marketing.d ... html#95159
mein Beitrag dort bezieht sich auf diejenigen mi "-" die sehr viel Traffik verursachten.
Keine Ahnung ob die nun "gut" oder "böse" waren/sein wollten. Weg sind sie jetzt.

MFG
Roland