Slurp

Beitrag von **viggen** » 12.08.2003, 16:47

Slurp/si,Slurp/cat
Spider des Datenproviders Inktomi https://www.inktomi.com/slurp.html

beachtet Robots.txt

bekannte IP: 66.196.64.0 - 66.196.127.255 | 209.131.32.0 - 209.131.63.255

Um diesen Robot von Ihrer Seite zu bannen geben sie folgende Zeile in Ihre Robots.txt ein

User-agent: slurp
Disallow: /

Anmerkung: Inktomi liefert im Moment Daten für MSN und Hotbot

wie immer, wer mehr info hat bitte posten.

von **Anzeige von ABAKUS** »

SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002

persönliche Betreuung
individuelle Beratung
kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.

Beitrag von **computerdirk** » 12.08.2003, 16:59

Hallöchen,

also ich denke man sollte diesen Bot auf keinen fall von der Seite bannen... Vielleicht sollten in den postings zu den Spidern noch Empfehlungen stehen ob er nützlich ist oder nicht...

Beitrag von **UweT** » 12.08.2003, 17:00

Um genau zu sein hat Slurpi nur die IPs zwischen:
66.196.64.0 - 66.196.127.255

oder soll sowas wie www.vvm.com (66.196.0.9) auch geblockt werden?

gruß
tbone.

Beitrag von **viggen** » 12.08.2003, 17:26

@computerdirk
ich denke "Anmerkung: Inktomi liefert im Moment Daten für MSN und Hotbot" sollte genug auskunft geben das er wichtig ist, oder sollten wir explicit sagen Nicht bannen?

@tbone habe ich geändert, danke

Beitrag von **computerdirk** » 12.08.2003, 17:33

Hallöchen,

ja, bei Inktomi ist es klar, aber es wird sicher auch zukünftig hier Postings geben für Bots/Spider die nicht so geläufig sind und vielleicht auch zweifelhafte Absichten hegen... War also mehr allgmein und vorausschauend gemeint der Hinweis...

Beitrag von **viggen** » 12.08.2003, 18:20

ja verstehe schon computerdirk

aber wir von Abakus können ja nicht einfach so festlegen den nicht und denn schon,

ich glaube unsere aufgabe ist es so viel wie möglich an informationen zu liefern, so das jeder dann seine eigene meinung darüber bilden kann,

grüsse
viggen