Es taucht immer nur der Google Fresh-Crawler auf
Verfasst: 15.01.2004, 23:06
Hallo, vielleicht kann mir jemand mal eine Frage erklären:
Ich habe gehört, wenn eine Seite neu bei Google angemeldet wird, kommt nach ein paar Tagen erst ein paar Mal der Fresh-Crawler von Google vorbei. Daraufhin kommt die neu indizierte Seite ziemlich gut platziert in die Suchergebenisse, wo sie aber nach ein paar Tagen wieder verschwinden soll. Dann soll wohl irgendwann der DEEP-Crawler von Google kommen, der dann die Seiten weitergehend erfaßt.
Bei vielen Seiten, die ich gemacht habe, kommen IMMER NUR die Fresh-Crawler (crawler11.googlebot.com, crawler15..., crawler10...) mit der IP 64.68.x.x aber NIE der DEEP-Crawler.
Kann mir das jemand erklären???
Ich habe gehört, wenn eine Seite neu bei Google angemeldet wird, kommt nach ein paar Tagen erst ein paar Mal der Fresh-Crawler von Google vorbei. Daraufhin kommt die neu indizierte Seite ziemlich gut platziert in die Suchergebenisse, wo sie aber nach ein paar Tagen wieder verschwinden soll. Dann soll wohl irgendwann der DEEP-Crawler von Google kommen, der dann die Seiten weitergehend erfaßt.
Bei vielen Seiten, die ich gemacht habe, kommen IMMER NUR die Fresh-Crawler (crawler11.googlebot.com, crawler15..., crawler10...) mit der IP 64.68.x.x aber NIE der DEEP-Crawler.
Kann mir das jemand erklären???
