Herzlich willkommen im Archiv vom ABAKUS Online Marketing Forum
Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.


 Sonst würd ich einfach jede Seite so lange verlinken bis der Bot da ist und dann ne neue Seite verlinken. Würde man ne Menge Seiten mit in den Index bekommen.
 Sonst würd ich einfach jede Seite so lange verlinken bis der Bot da ist und dann ne neue Seite verlinken. Würde man ne Menge Seiten mit in den Index bekommen.
 Tatsächlich habe ich Verzeichnisse, die ich schon lange deaktiviert habe, die immer noch fast täglich von MSN gespidert werden. Warum, wieso, keine Ahnung. MSN ist sowieso ein ganz besonderer Ausnahmefall, was das spidern und die Aufnahme in ihren Index betrifft.
 Tatsächlich habe ich Verzeichnisse, die ich schon lange deaktiviert habe, die immer noch fast täglich von MSN gespidert werden. Warum, wieso, keine Ahnung. MSN ist sowieso ein ganz besonderer Ausnahmefall, was das spidern und die Aufnahme in ihren Index betrifft.