212.227.109.141 - Googlebot?

Beitrag von **spli** » 21.05.2005, 10:33

Hallo,

der Bot hat sich an nur einem Tag mehrere 1000e male ausschließlich meiner Startseite gewidmet bei einem Durchschnitt von 25 Seiten / Sekunde. Meine "robots.txt" hat er nie gecrawlt. Als Kennung hat er "Googlebot/2.1 (+https://www.google.com/bot.html)" mitgeschickt. Was ich noch komisch finde ist folgendes: "GET / HTTP/1.0" 301 295 "https://www....."

Gruß

von **Anzeige von ABAKUS** »

SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002

persönliche Betreuung
individuelle Beratung
kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.

Beitrag von **Pompom** » 21.05.2005, 11:31

Ist eine Schlund&Partner IP, da glaube ich ja nun nicht dran, dass dort die Googlebots wohnen.