googlebot fernsteuern.

[Sandy]

das liegt an Google-Adsense....

Kann ich zu 100% bestätigen, wenn ich eine Seite aufrufe kommt Sekunden später der Googlebot.

Sandy

[sean]

Hi Sandy!

Ich habs eben mal probiert, geht bei mir auch. Aber der GoogleBot scheint nur zu kommen, wenn ICH die Seite aufrufe. Sonst wäre er ja den ganzen Tag da.

Wie ist das zu erklären?

sean

[LinkPop]

Also ich kann das tausendmal machen - was kommt ist der Mediapartners (mit versch. IPs) - nix Index-Bot.

[LinkPop]

@sean

*lach* vielleicht mag er D*ICH* ?

[sandoba]

Gibt es Statistiken, wie hoch der Prozentsatz der Benutzer ist, die die Google Toolbar installiert haben? Dies wäre dann die Erklärung: Kein andere Besucher der Seite hat die Toolbar installiert.

Aber bei einer Seite zum Thema SEO doch sehr unwahrscheinlich.

[LinkPop]

Ich denke SOviel Ressourcen hat G nun auch wieder nicht, um gleich bei jedem Tollbar+Seiten-Aufruf loszuhetzen...da würde ganz schön was an Traffic + Last zusammenkommen.

Andere Frage:
Wenn ich nun 'ne neue Seite (1 html-Seite) ins Netz stelle und diese nicht nirgends never verlinke - was will G damit?

[sean]

also, er kommt nicht wenn ich die Seite mit Netscape aufrufe. Mit dem Aufruf über IE muß ich aber gestehen vorher bei Adsense gewesen zu sein. Diesen Zusammenhang kann ich nachvollziehen. Aber dass das so pauschal mit Adsense zu tun hat glaube ich nicht.

@LinkPop

>>> *lach* vielleicht mag er D*ICH* ? <<<
auf jeden Fall, wenn er nicht morgends und mittags da war bekomme ich ein schlechtes Gefühl

sean

[km911]

Also,

leider konnte ich di Diskussion heute abend nicht mitverfolgen da Besuch da war...

Wenn ich eine neue Seite online stelle kommt innerhalb einer Zeitspanne von 1 min bis 2 Stunden der Googlebot vorbeigeschlittert...

...das ist dann der stinknormale Googlebot mit der stinknormalen Google IP, der auch immer kommt um die Seiten zu indizieren. Wenn man die IP-Adreese per IP-Lookup auflöst stellt sich heraus, es ist Crawler8 oder Crawler15 oder irgendein anderer aus der Familie, jedenfalls hatte ich noch nie einen Mediapartners-Bot.

Das ganze ging soweit, dass eine Seite, die ich zwei Tage vor dem offiziellen Launch über eine Testdomain online gestellt habe bereits komplett gespidert wurde, bevor sie in irgendeiner Form von einer anderen Seite aus verlinkt worden wäre...

Abgesehen davon, ist diese Diskussion bereits vor 6 Wochen schon einmal geführt worden, weil es mir ein wenig komisch vorkam, dass eine neue Seite innerhalb derart kurzer zeit komplett im Index sein kann.

[SISTRIX]

der Mediapartnersbot zeigt sich durch den Useragent und nicht durch den Hostname.

Gruss Johannes

[HW]

Hallo Leute,
also ich habe auch seit zwei Tagen AdSense auf meiner Website und kann nur bestätigen, dass dadurch neue Seiten in wenigen Stunden im Index sind. Also wenn man kein Geld damit verdient, nicht schlimm. Ich habe meine Seiten jetzt schnell im Index.

[Metaman]

naja auf jedenfall hat es nichts mit der Toolbar zu tun.
habe gerade selber wieder meinen IE entstaubt, die Toolbar neu installiert und einige neue Seite aufgerufen

und selbst nach einer Stunde war noch kein google bot da....

[dirk]

Aaaalso ... sitrix hat da schon recht.

Ich hatte beispielsweise grade Besuch von '64.68.86.138' ... wenn man den mit einem simplen 'ping -a 64.68.86.138' unter windoof oder mit dem tool eurer wahl auflöst, kommt der host 'crawler4.googlebot.com' raus. Wenn ich dann ins Log gucke, steht da :

'64.68.86.138 - - [03/may/2004:00:52:46 +0200] "get /cgi-bin/browse.pl?root/deutsch/online-shops/computer http/1.0" 200 34213 "-" "mediapartners-google/2.1 (+https://www.googlebot.com/bot.html)" '

Die Betonung liegt auf 'mediapartners-google', was der adsense-googlebot ist, der sich grade meine Seite https://www.myodp.de/cgi-bin/browse.pl? ... s/computer anguckt, um dort passende Adsense Werbung zu schalten.

= die beiden bots teilen sich die hosts bzw. nutzen die selbe subdomain. Keine Ahnung, ob crawler4 nur für Adsense zuständig ist, aber AFAIK war der bei mir auch schonmal mit nem normalen googlebot ?!

[LinkPop]

@dirk - So ist es.

Das wäre mir auch neu, dass der normale Index-Bot vorbei kommt, nur weil man 'ne Seite mit inst. Toolbar oder Adense aufruft. Das Seiten nach wenigen Stunden im Index sind, halte ich immernoch für puren Zufall.

Was da kommt, ist und bleibt der Mediapartners-Bot.

[bugscout]

moin moin,

bei mir wars ein fehler im statistik tool,

der googlebot wird nach ip aufgelöst
der mediabot nach useragent.
da die ips aber aus dem selben bereich kommen,
wurde der mediabot immer als googlebot angezeigt.

bei mir ist es auch der mediabot, der sofort kommt
wenn ich eine neue seite mit adsense baue, ohne
adsense kann ich lange warten.

grüsse

[Steppel]

könnt ihr das mal mit meiner domain testen? *g* ich war so sehnsüchtig auf den googlebot