Wie crawlt Google gut?
Verfasst: 14.07.2008, 19:01
Hi,
Ich betreibe u. a. ein Forum und mir ist aufgefallen, dass Google dem Anschein nach, mein Forum anders crawlt wie andere. Das sehe ich in der WIW bei mir und habe mich bei anderen Kollegen rückvergewissert.
Seit letztem Jahr sieht es so bei mir aus, das ich in der WIW (mit IP) bei mir fast immer nur einen Bot sehe. Dieser Kammerad, zusammen mit seinem Bruder vom Adsence (gleiche IP), bleibt bei mir (fast) permanent mit der selben IP ca. 10 bis 15 Tage bevor der nächste kommt. Nur ganz selten - meist bei Übergabe an die nächste IP - habe ich zwei unterschiedliche Bots im Board kleben. Meine IP-Anzeige (Session) ist auf bis 15 Minuten eingestellt.
Bei anderen Board sehe ich oftmals mehrere Bots gleichzeitig. Ein Kollege hat mir hat mir für sein Board bestätigt, das er hier ein kommen und gehen hat. Ständig ein und die selbe IP hat er nicht am Board. Dafür aber oft mehrere gleichzeitig.
Muss ich mir da einen Kopf machen? Ist das gut, schlecht oder schei... egal? So wie das bei mir läuft!
Ich betreibe u. a. ein Forum und mir ist aufgefallen, dass Google dem Anschein nach, mein Forum anders crawlt wie andere. Das sehe ich in der WIW bei mir und habe mich bei anderen Kollegen rückvergewissert.
Seit letztem Jahr sieht es so bei mir aus, das ich in der WIW (mit IP) bei mir fast immer nur einen Bot sehe. Dieser Kammerad, zusammen mit seinem Bruder vom Adsence (gleiche IP), bleibt bei mir (fast) permanent mit der selben IP ca. 10 bis 15 Tage bevor der nächste kommt. Nur ganz selten - meist bei Übergabe an die nächste IP - habe ich zwei unterschiedliche Bots im Board kleben. Meine IP-Anzeige (Session) ist auf bis 15 Minuten eingestellt.
Bei anderen Board sehe ich oftmals mehrere Bots gleichzeitig. Ein Kollege hat mir hat mir für sein Board bestätigt, das er hier ein kommen und gehen hat. Ständig ein und die selbe IP hat er nicht am Board. Dafür aber oft mehrere gleichzeitig.
Muss ich mir da einen Kopf machen? Ist das gut, schlecht oder schei... egal? So wie das bei mir läuft!
