Unterschied zw. Yahoo und Google crawling

[marle]

Hallo,

warum spidert Yahoo nur ein paar seiten tägl. von mir?
der Goggle bot hingegen 1000ende!

wo liegt der unterschied zwischen den beiden suchmaschinen?
habt ihr das auch schon beobachtet?
kann ich hoffen das yahoo mal einen ruck bekommt und mehr seiten spidert?
wie sind eure erfahrungen?

muss ich irgendetwas noch beachten bei evtl der internen verlinkung?

geht um
https://www.industrystock.com

gruss

[marle]

weiss niemand rat?
oder hab ich mich unverständlich ausgedrückt?

[LinkPop]

Yahoo ist anfangs sehr träge und liest immer nur ein paar Seiten ein. Irgendwann kommen aber auch umfassende Deepcrawls -> direkt aus dem Datenbestand (was hin und wieder viele 404er begründet). Die Spider-Intensität ist verglichen mit Google aber schon immer geringer. Sofern techn. alles i.O. ist, heißt es einfach "warten".