Seite 1 von 1

Refererverhalten GoogleBot

Verfasst: 27.07.2003, 17:54
von Southmedia
Kommt der Googlebot manchmal mit Referer *google(.de|.com|.at)*?

In versch. Weblogs werden allen Besuchern mit eben diesen Referern gecloakte (aber gutartige!) Seiten geliefert damit die Leute sich besser auf den Seiten zurechtfinden. Nur wenn der Googlebot selbst (manchmal) diesen Referer verwendet würde das ja zwangsläufig zur Abstrafung führen.

Hat irgendjemand Infos ?

Grüße, Jan

Verfasst:
von
SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002
  • persönliche Betreuung
  • individuelle Beratung
  • kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.


Verfasst: 27.07.2003, 19:50
von Noki
ich persönlich habe den googlebot noch nicht mit referer gesehen... hat mich bisher aber auch noch nicht interessiert, 100%ig kann ich es dir also nicht sagen...

Verfasst: 27.07.2003, 19:55
von Southmedia
Der GoogleBot wird doch nicht komplett ohne Referer daherkommen, oder?

Verfasst: 27.07.2003, 20:18
von Noki
bisher schon...

Verfasst: 27.07.2003, 21:01
von bugscout
moin moin,

ich denke du meinst das "google" referer liefert.

wo der bot vorher gespidert hat dürfte relativ uninteressant sein.

grüsse

Verfasst: 27.07.2003, 21:14
von Southmedia
Das ist eben die Frage ober der mit liefert wo er vorher gespidert hat.

Google muss einen Referer liefern weil man das über einen normalen Browser abruft.
Der Googlebot jedoch ist eine Softwareanwendung und da könnte die Übertragung des Referer ausgeschalten sein, was weiss ich. Deshalb frage ich ja ob der Googlebot wie ein normaler User einen (korrekten) Referer übermittelt.

Verfasst: 27.07.2003, 21:15
von Noki
nö...

Verfasst: 27.07.2003, 21:43
von bugscout
moin moin,

keine referer gefunden

crawler15.googlebot.com - - [27/Jul/2003:00:35:05 +0200] "GET / HTTP/1.0" 200 6563 "-" "Googlebot/2.1 (+https://www.googlebot.com/bot.html)"