Boitho.com-robot/1.1
Spider von der norwegischen (auch englische Seiten werden gespidert und im index aufgenommen) Suchmaschine https://www.boitho.com/index.htm.en
beachtet Robots.txt
bekannte IP: 217.118.38.XXX
Um diesen Robot von Ihrer Seite zu bannen geben sie folgende Zeile in Ihre Robots.txt ein
user-agent: boitho.com-robot???
disallow: /
falls noch jemand was hinzufügen möchte bitte nur zu
wegen dem dissalow nicht sicher da noch nicht getestet
I am chief programmer at boitho.com, and I am sorry for any inconvenient. I unfortunately can not read German, but I it looks like you are asking about the boitho robot.
Boitho.com is a Norwegian search engine, information about the boitho robot is available here: https://www.boitho.com/bot.html
Feel free to mail me at runarb ( at ) boitho.com if that don’t answer you question. We value your feedback.
Basically this is a place where new robots get listed. We advise users to disallow robots until they have been checked out as to what their function is. As your robot is a search engine robot and nothing nasty, then we can now advise our visitors to allow the robot.