Bing Bot legt Seite "fast" Lahm

Hallo,

ich habe seit kurzem das Problem das der bingbot ca 30 - 100 mal auf der Seite ist und die Seite fast lahmlegt.

Ich kann den Bot ja nicht aussperren, da die Rankings in Bing auch nicht unwichtig sind.

Hat vielleicht jemand einen Rat wie ich den Zugriff limitieren kann?

Gruß und Danke!

Hallo,

Bing hat mehrere IP-Ranges . da kannst du ruhig einen besonders aufdringlichen sperren.

bist du sicher das es bing ist?
es sind naehmlich einige fake bots unterwegs die sich als bing ausgeben.
google sagt dir ne menge mehr.
suche "bing fake spider" usw., dann wirst schlauer

hier findest alle spider ip's
https://www.clientip.net/article/Search ... er-IP-List

oder versuche mal ob das funkt. schreibe in die robots.txt

User-agent: msnbot
Crawl-delay: 30

oder gleich fuer alle spider:

User-agent: *
Crawl-delay: 30

30=30 sekunden pause zwischendurch, das kannst auch anpassen

sind es aber fake spider, die nur content grabben, oder sonstigen unfug treiben, wird das nicht helfen, dann musst die ips per htaccess sperren.