wie funzt das mit dem follow

[patrick0815]

Hallo,

ich wollt mal wissen wie das so mit dem follow funktioniert.

Mir ist bei ner site aufgefallen, dass einige Seiten einen aktuelleren Cache haben als andere. Ich dachte immer der bot folgt dann allen Links auf der Seite und aktualisiert dann eben auch den Cache der verlinkten Seiten. Das ist aber nicht der Fall. Oder kann es eventuell auch daran liegen, dass die betroffene Domain in einem Unterverzeichnis liegt?


Gruß

Patrick

[danielr]

meinst du das?

<meta name="robots" content="INDEX, FOLLOW">

gruß,
danielr

ps: wenn ich das richtig verstanden habe, ist nur die startseite aktualisiert im cache?
falls ja, warte mal auf den deepbot.

[axelm]

meinst du das?
<meta name="robots" content="INDEX, FOLLOW">

Was soll das denn bewirken?
Die Grund einstellung eines Bots ist es Seiten zu indexieren und Links zu verfolgen. Vollkommen überflüssig das Teil.

[ION]

Tante Goo hat derzeit rund 8 Mrd. Seiten im Index. Da bleibt nicht immer Zeit, sich mit jedem - Entschuldigung - Privatprojekt herumzuplagen. Mal ein schneller Blick auf die Index und bei Gelegenheit schaut sie auch mal wieder länger rein. Wie man so hört, stöbert sie auf Seiten mit höherem Pagerank gern mal intensiver rum, während neue Seiten nur mal schnell überblättert werden. Da bleiben gelegentlich gar TITLE und DESCRIPTION auf der Strecke. Vom Cache ganz zu schweigen.

Man braucht ein wenig Geduld mit Tante Goo. Sie hat wirklich irre viel zu tun.