Seite 1 von 1
Ist der neu?
Verfasst: 16.12.2004, 14:20
von googi
hallo zusammen!
hab den zum ersten mal in meinen logs gesehen:
Mozilla/5.0 (compatible; BecomeBot/1.23; +
https://www.become.com/webmasters.html)
gibs dazu mehr infos?
Verfasst: 16.12.2004, 14:32
von Sunbringer
Jo, der ist wohl relativ neu!
Ist unter
Robotstxt.org noch nciht aufgeführt.
Die geben aber an, dass er sich an die robots.txt halten soll. Wäre mal zu prüfen, aber wenn er es tut, wäre es auf jeden fall keine Bedrohung.
Become soll als eine neue Suchmaschine aufgebaut werden... (noch eine... ) . Mal abwarten, wie die sich entwickeln. Ich persönlich würd ihn erstmal nicht blocken.
Verfasst: 16.12.2004, 15:17
von bull
War heute auch als
Mozilla/5.0 (compatible; BecomeBot/2.0beta;
https://www.become.com/webmasters.html)
da. Nur robots.txt geholt.
