Googlebot

Beitrag von **mike2005** » 24.02.2005, 15:18

Hallo,

was macht eigentlich der Googlebot
>> Mozilla/5.0 compatible; Googlebot/2.1
genau.

Hab hier schon gesucht, aber anscheinend hat keiner eine richtige und aussagekräftige Antwort parat.

Wir haben nämlich die letzte 24h so an die 10.000 Zugriffe durch diesen Bot, und wüssten daher einmal gerne was der so treibt.

Danke

von **Anzeige von ABAKUS** »

Beitrag von **Southmedia** » 24.02.2005, 16:01

Hier eine Antwort auf diese Frage direkt von Google:

Hi Jan,

Thank you for your note. The second robot you describe does belong to
Google. There can be some time in between when a page is crawled and when
it appears in our index. Also, although our robots may visit your site, we
cannot guarantee that your pages will be thoroughly crawled or indexed.
For site indexing and ranking recommendations, please visit
https://www.google.com/webmasters/guidelines.html

Regards,
The Google Team

Wollten mir nicht wirklich sagen was der gute macht... Seiten in den Index bringen tut er auf jeden Fall nicht.

Beitrag von **mike2005** » 24.02.2005, 16:22

Kann ich jetzt gar nicht glauben, denn wenn du spasshalber mal in Google Mozilla/5.0 compatible; Googlebot/2.1 als Suche eingibst, findest du doch einige Seiten. Sind zwar viele mit Beuschstatistiken, aber auch einige den in der Fusszeile z.B. den Agent anzeigen. Da dieser natürlich dynamisch nagezeigt wird, siehst man nicht Mozilla/5.0 compatible; Googlebot/2.1 sondern den eigenen Browser, aber bei Google stehen Sie eben mit Mozilla/5.0 compatible; Googlebot/2.1 im Index.

Was hälst du jetzt davon?

von **Anzeige von ABAKUS** »

Beitrag von **AMM** » 24.02.2005, 16:23

Der Mozilla Bot von Goolge packt definitiv KEINE Seiten in den Index...

Beitrag von **LinkPop** » 24.02.2005, 16:30

Wenn im Cache besagter Seiten "Mozilla/5.0 compatible; Googlebot/2.1" steht, bleibt ja nix weiter übrig, als daß genau dieser Bot den Content eingelesen und für den Index weitergereicht hat, oder?

AMM, klär mich auf.

Beitrag von **AMM** » 24.02.2005, 16:34

@ LinkPop

...was ich festgestellt habe ist,dass der Mozilla Bot nichts an Seiten in den Index knallt.

Allerdings ist sehr auffällig,dass in der Zeit,wo dieser Bot bei uns läuft der 2.1,also der normale Bot sich sehr zurückhält,nachdem der Mozilla Bot aber fast kaum noch bemekrbar ist,eben der 2.1 sich mit vollen Kräften auf alles stürzt,was nicht bei 3 auf´m Baum ist....ich denke eher der Mozilla Bot hat Prüffunktion,für was auch immer...

Beitrag von **SloMo** » 24.02.2005, 16:34

@LinkPop: Gut erkannt, genau so muss es sein!

Beitrag von **mike2005** » 24.02.2005, 16:44

Also weiter im Text,

hatte folgende Suchanfrage an Google:

https://www.google.de/search?q=Mozilla/ ... rt=10&sa=N

Ergebnis auf Seite 2:
z.B: D.R....- NetScan, ServerWatch, VideoOS, PHP, Linux ...

und im Text

de/swt/ Der von Ihnen benutzte Browser ("Mozilla/5.0 (compatible; Googlebot/2.1;
+https://www ...

Ruft Ihr die Seite auf seh ihr euren eigenen Browser, ergo muss die Seite von
Mozilla/5.0 compatible; Googlebot/2.1 in den Index aufgenommen sein, oder steh ich jetzt total auf der Leitung?

Beitrag von **robbelsche** » 24.02.2005, 17:06

Southmedia hat geschrieben:Hier eine Antwort auf diese Frage direkt von Google...

Hier noch eine...

Beitrag von **Southmedia** » 25.02.2005, 20:56

Ne mike, da hast du Recht. Ich sprach auch nur von meinen eigenen Erfahrungen - deine Suche bei Google sagt was anderes.

Das Statement das robbelsche verlinkt hat sagt ja auch dass es sich dabei nur um ne kosmetische Änderungen handelt - ich bin da allerdings eher skeptisch was den guten Google-Guy angeht...