Seite 1 von 2
Nph Proxy Gizliweb nph proxy probleme
Verfasst: 13.12.2006, 12:31
von Golfbobbie
hello
habe folgendes eingebaut, aber Gizliweb kommt immer noch:
order allow,deny
allow from all
Deny from 202.212.112.0/24
Deny from 217.20.117.0/24
Wäre es eine gute Idee all bots auszusperren und nur folgende gute bots zu erlauben:
google
msn
yahoo
ask
altavist
und andere wichtige bots
oder ist das ein dumme idee?
gibt es jemand der so einen service gegen Bezahlung anbietet?
bitte um hilfe bob
Verfasst: 13.12.2006, 13:14
von sean
man kann den nicht aussperren. Er kann ja auch seinen Crawler über eine DialIn Leitung laufen lassen mit wechselnder IP und normaler UserAgent.
Gruß
sean
Verfasst: 13.12.2006, 13:34
von Golfbobbie
@Sean
was Kann man Dann tun?
Verfasst: 13.12.2006, 13:42
von Airport1
den kann man schon aussperren, siehe bereits vorhandener nph thread hier im forum. man muss dazu allerdings die "abgrab-ip" herausfinden, NICHT DIE WEBSERVER IP, loesung siehe ebenfalls den anderen thread. oder man baut den page restrictor von bot-trap ein, der haelt den aktuell auch noch fern.. und wenn sich die ip wieder aendert (passiert schon ab und an) dann sind wir die ersten die es mitbekommen und updaten *fg*
Verfasst: 13.12.2006, 14:33
von Golfbobbie
@airport
danke
Verfasst: 15.12.2006, 02:36
von metecik
hi,
please pm me for the removal request from gizliweb.com
Best Regards.
Verfasst: 15.12.2006, 11:13
von Kristian
Hallo
PN's are limited in size.
I would like to send you my full list for removall request.
It's about 1.2 GigaByte XML in a tar.gz File.
Any way to send it?
Any way to remove this URL's?
Regards
Kristian
Verfasst: 15.12.2006, 12:00
von sean
@Kristian
Du sollst nicht gizliweb.com komplett removen sondern deine Domains nennen
Gruß
sean
Verfasst: 15.12.2006, 12:05
von Kristian
@sean
Ja, ich habe in die Datei ja auch nur meine Domains geschrieben und die von ein paar Leuten von denen ich annehme, dass sie ihren Kontent nicht für GizliWeb gemacht haben.
Gruss
Kristian
Verfasst: 15.12.2006, 12:28
von n3m0
sean hat geschrieben:@Kristian
Du sollst nicht gizliweb.com komplett removen sondern deine Domains nennen
Doch, soll er!!!
<SCNR>
Verfasst: 15.12.2006, 12:49
von Airport1
>> Du sollst nicht gizliweb.com komplett removen ..
> Doch, soll er!!!
Stimmt! Dann haben alle was (und mehr) davon.
Vor allem mehr Zeit sich um die wichtigeren Dinge des Lebens zu kuemmern
Weg mit dem ollen Viech!!
Verfasst: 15.12.2006, 13:27
von metecik
Kristian hat geschrieben:Hallo
PN's are limited in size.
I would like to send you my full list for removall request.
It's about 1.2 GigaByte XML in a tar.gz File.
Any way to send it?
Any way to remove this URL's?
Regards
Kristian
Put it on a website and give the url, so I could take it and make the removal.
Verfasst: 15.12.2006, 13:59
von Kristian
Hallo
@forum
Im Moment kann, darf und will ich ihn nicht "removen".
Der allgemeine Tenor ist eindeutig: "Keine Selbstjustiz & Don't be evil", auch wenn Ihr jetzt teilweise andere Meinungen habt.
Das eben war ein Spruch, Sch...... ich habe eigentlich andere Arbeit aber jetzt werde ich ihm die Datei wohl erstmal fertig machen müssen.
Moment...
Kristian
Verfasst: 15.12.2006, 14:00
von Kristian
Hallo
metecik hat geschrieben:
Put it on a website and give the url, so I could take it and make the removal.
Please stand by, I'm working on it.
Best Regards
Kristian
Verfasst: 15.12.2006, 17:00
von Kristian
Hallo
Ich frage mich gerade wie verrückt ich denn manchmal bin.
Ich habe gerade besagte 1,2 Gig-Datei in ein verträgliches XML-Format verwandelt, als sinnvoll erschien mir das Format der SiteMaps, da setzte das Denken ein.
Wie kann ich jemandem den ich nicht kenne eine solche Datei geben.
Daraus macht jeder Depp mit 10 Zeilen Perl-Code eine SiteMap für Google in der die URL's über den NPH-Proxy laufen.
In eine solche Datei kann ich bestenfalls die URL's reinschreiben, die ich selbst übersehen kann aber nie die URL's von Leuten von denen ich glaube, dass Sie das wollen.
Was hat mich da nur geritten?
Ich ziehe mich mal in's Kämmerlein zurück und überleg mir was.
Gruss Kristian
