Seite 1 von 1
Wieviele Seiten crawl ein Webspider pro Sekunde?
Verfasst: 30.08.2006, 13:24
von blinkster
Juden Tag.
Das ist nur eine theoretische Frage. Ich möchte nicht wissen, wie oft der Crawler auf meine Seite zugreift, sondern wieviele Seiten der Google-Crawler pro Sekunde im Schnitt verarbeitet.
Ich habe diesbezüglich auf den Google-Seiten keine Informationen gefunden, genauso wenig, wieviele Crawler im schnitt im Netz unterwegs sind.
mfg
stefan
Verfasst:
von
SEO Consulting bei
ABAKUS Internet Marketing Erfahrung seit 2002
- persönliche Betreuung
- individuelle Beratung
- kompetente Umsetzung
Jetzt anfragen:
0511 / 300325-0.
Verfasst: 30.08.2006, 15:19
von linux
je nachdem wieviele bots bei dir drauf sind.
google hat viele bots ich hatte mal einen fall da waren 3 bots auf einer unseren seiten. es gab ca 1 mil seitenaufrufe am tag.
wir haben z.b einen eigenen spider wo ich einstellen kann wieviele aufrufe er gleichzeit macht der kann bei volllast 100.000 seiten in der stunde aufrufen
wenn du einen linux server hast kannst du auf der konsole mit top sehen wieviele httpd treads gerade offen sind
gruß
linux
Verfasst: 30.08.2006, 17:10
von bull
wieviele Seiten der Google-Crawler pro Sekunde im Schnitt verarbeitet.
Logfile ansehen und Zeiten vergleichen. Mozilla/Googlebot erfahrungsgemäß max. 2 pro Sekunde.
Verfasst: 30.08.2006, 18:25
von miccom
bull hat geschrieben:wieviele Seiten der Google-Crawler pro Sekunde im Schnitt verarbeitet.
Logfile ansehen und Zeiten vergleichen. Mozilla/Googlebot erfahrungsgemäß max. 2 pro Sekunde.
Das will er doch nicht wissen, er will wissen wieviel Seiten so ein Crawler insgesamt verarbeiten kann.
Verfasst: 30.08.2006, 18:49
von bull
Ja, wahrscheinlich. Bekenne mich des Überfliegens des Beitrags schuldig.
