ABAKUS

Danke das du mich daran erinnerst

ja aber ich glaube dass der freshbot jetzt ein deepbot geworden ist. hab den deepbot die letzten 2 monate nicht gesehen, nur freshbot und alles vom freshbot abgecrawlte ist permanent drin.

Es gab erst vor kurzem 2 oder 3 Tage an denen der Bot sehr aktiv war. Das war dann wohl der Deepcrawl. Kann gut sein das dafür auch die "Freshbots" benutzt werden. Im Moment schluckt Google so schnell, dass es mir aber auch egal ist welcher Crawl im Moment läuft.

Früher konnte man anhand der IPs / Hostnames der Bots unterscheiden wie er sich verhalten wird, bestimmte IPs haben nur die Startseite geholt, andere eben alle Seiten.

Dies ist meiner Meinung nach aber schon länger nicht mehr so, bei mir machen die Bots was sie wollen. Mal mehr, mal weniger Seiten. Dabei kann man natürlich auch das alte Verhalten beobachten dass einige Bots nur eine Seite haben wollen, andere dagegen alle auf einmal. Nur lässt sich das nicht mehr klar unterscheiden.

Hat jemand eine Erklärung dafür warum der neue Bot bei mir gestern über 500 x auf die Startseite zugegriffen hat? Hatte ich noch nie sowas.

Vielleicht hat ihm deine Seite so gut gefallen.

ich hab in den letzten 2 jahren nicht eine solche mega-starke-aktivität auf meiner seite festgestellt wie in den letzten 2 tagen. freshbot frisst grad alles weg...

terese0815 hat geschrieben:Hat jemand eine Erklärung dafür warum der neue Bot bei mir gestern über 500 x auf die Startseite zugegriffen hat? Hatte ich noch nie sowas.

Die meisten von uns habe ne Dynmaische Startseite.
bei mir ist bei jedem reload ein link zu einer neuen Bilder Galerie (120 zur Auswahl, link wird per Zufallsgenerator erstellt).

Dann hat man noch was wie "Zitat der aktuellen Minute" oder irgenwas was öfters rotiert.

Dadurch ändert sich den Bot ja der Inhalt/Aufbau/content der Seite.
Ich kann mir vorstellen, dass die jetzt versuchen rauszufinden nach welchem System sich die Seite sich aufbaut.
Wenn die jetzt nach 500 Reloads merken. "Ok, da kommt immer was anderes aber insgesamt haben wir 120 Links zu Bildergalerien gefunden. Gehen wir mal davon aus, dass da ein Random Generator für die nächsten 5 Zeilen ab Zeile 350 XYZ im Code ist. Setze mal ein Flag in der DB, dass diese Seite jeden Tag neuen Content aus seinem Pool auf die Startseite darstellt. Werte diese Seite anders als eine die wirklich jeden Tag Content hat der nicht aus einem vorhanden Pool hat" etc etc...

Hi axelm,

das wäre eine gute Erklärung dafür. Vielen Dank. Mal schauen ob und wie sich das auswirken wird.


Viele Grüße

Stefan