Darüber wurde ja bereits schon mal geschrieben. Es ist natürlich völliger Quatsch, dass Google verschwindet, sobald msn auftaucht! Google kann doch gar nicht wissen, was auf Deinem Server los ist und interessiert Google doch auch gar nicht, ob da noch andere Crawler oder User oder sonst was unterwegs sind.
Die einzig plausible Erklärung für diesen "Zufall" _könnte_ sein, dass Dein Server sowas von in die Knie geht, wenn msn spidert, dass es Google zu lange dauert (Gerüchte) und verschwindet, um später wiederzukommen. Wenn das so ist/sein sollte, dann solltest Du Dir mal darüber Gedanken machen.
Täglicher Ranking-Check Deiner Top-Keywords mit Traffic-Index für Mobile und Desktop, Serp-View, Reporting, Ranking-Charts, Konkurrenzanalyse, Ranking-Verteilung, Keyword-Suggest und mehr für nur 11,90 € / Monat. Jetzt alle rankseek-Tools 30 Tage kostenlos testen » [url=httpss://www.rankseek.com/features.php]Features[/url]
hallo Scubi
Da momentan keiner weiß was mit den msn Ergebnissen passiert, bzw. wann diese irgendwo sichtbar werden, würde ich ihn machen lassen. Vielleicht kommt da ja was.
Also so lang er nicht stört oder zu viel traffic macht mal machen lassen.
Falls zuviel Traffic durch msn verschleudert wird, die Angabe:
User-Agent: msnbot
Crawl-Delay: 20
bremst den Bot wirklich aus! Ich hab's seit gestern in der robots.txt drin und stelle deutliche Unterschiede fest. Der Bot ist nach wie vor 24h am crawlen, aber schön ruhig.
Mich würde mal interessieren, welche Maschinerie MSN da hochgezogen hat? Langsam glaube ich hier hat jeder seinen eigenen Bot bekommen
Täglicher Ranking-Check Deiner Top-Keywords mit Traffic-Index für Mobile und Desktop, Serp-View, Reporting, Ranking-Charts, Konkurrenzanalyse, Ranking-Verteilung, Keyword-Suggest und mehr für nur 11,90 € / Monat. Jetzt alle rankseek-Tools 30 Tage kostenlos testen » [url=httpss://www.rankseek.com/features.php]Features[/url]
Jepp, msnbot führt im direkten Duell, aber seine Art zu indizieren ist wirklich ungestüm. Mal schauen was da kommt. Wenn ich am Start mit allen Seiten drin bin, ists auch gut