Slurp

[viggen]

Slurp/si,Slurp/cat
Spider des Datenproviders Inktomi https://www.inktomi.com/slurp.html

beachtet Robots.txt

bekannte IP: 66.196.64.0 - 66.196.127.255 | 209.131.32.0 - 209.131.63.255

Um diesen Robot von Ihrer Seite zu bannen geben sie folgende Zeile in Ihre Robots.txt ein

User-agent: slurp
Disallow: /

Anmerkung: Inktomi liefert im Moment Daten für MSN und Hotbot

wie immer, wer mehr info hat bitte posten.

[computerdirk]

Hallöchen,

also ich denke man sollte diesen Bot auf keinen fall von der Seite bannen... Vielleicht sollten in den postings zu den Spidern noch Empfehlungen stehen ob er nützlich ist oder nicht...

[UweT]

Um genau zu sein hat Slurpi nur die IPs zwischen:
66.196.64.0 - 66.196.127.255

oder soll sowas wie www.vvm.com (66.196.0.9) auch geblockt werden?

gruß
tbone.

[viggen]

@computerdirk
ich denke "Anmerkung: Inktomi liefert im Moment Daten für MSN und Hotbot" sollte genug auskunft geben das er wichtig ist, oder sollten wir explicit sagen Nicht bannen?

@tbone habe ich geändert, danke

[computerdirk]

Hallöchen,

ja, bei Inktomi ist es klar, aber es wird sicher auch zukünftig hier Postings geben für Bots/Spider die nicht so geläufig sind und vielleicht auch zweifelhafte Absichten hegen... War also mehr allgmein und vorausschauend gemeint der Hinweis...

[viggen]

ja verstehe schon computerdirk
aber wir von Abakus können ja nicht einfach so festlegen den nicht und denn schon,

ich glaube unsere aufgabe ist es so viel wie möglich an informationen zu liefern, so das jeder dann seine eigene meinung darüber bilden kann,

grüsse
viggen