Spidert goo... im Moment wenig ?

[wowglider]

ich kann mich mit kennsteschon.de eher weniger beschweren sobald neue artikel online sind spider ich sie und füg sie in den webmatertools hinzu - innerhalb von 24h kommt der bot und innerhalb von ein paar stündchen sind sie im index - vllt noch ("jungheitsbonus") bonus - wer weiß

[Fantastixxx]

So so du spiderst sie also. Bist du ein Bot?

So langsam machst du dem User "Cooldino" Konkurrenz, der mir in letzter Zeit abstinent erscheint.

[transrad]

Also ich konnte aktuell an einer neu eingestellten Seite feststellen, daß sie verdammt schnell indexiert wurde.

Greets Mario

[Fox Mulder]

Musste gerade teile eines Projekts für Googlebot sperren da er sonst zu massiv spidert: Googlebot hyperaktiv Requests z.Z. 1-3 mal pro Sekunde.

[wowglider]

So so du spiderst sie also. Bist du ein Bot?

So langsam machst du dem User "Cooldino" Konkurrenz, der mir in letzter Zeit abstinent erscheint.

Ernste Frage oder nur Ironie?

GsiteData, ja ich Spider...

[yung]

ja konnte schon auch normale Tätigkeit feststellen.

aber nur auf manchen Seiten. Enthält die Seite kaum content, dann kommt der spider wohl auch nicht allzu oft vorbei