Seite 1 von 1
ConveraCrawler - authoritativeweb.com/crawl
Verfasst: 03.06.2005, 09:25
von Billy04
Hallo
Dieser Crawler ist nun schon seit fast einer halben Stunde dran.
Kennt den jemand?
ConveraCrawler/0.8 (+
https://www.authoritativeweb.com/crawl)
ConveraCrawler - authoritativeweb.com/crawl
Verfasst: 03.06.2005, 10:28
von stalker
steht doch alles auf der seite
an die robots.txt hält er sich ja nach aussage des betreibers auch
und somit ist doch alles in Ordnung
ConveraCrawler - authoritativeweb.com/crawl
Verfasst: 04.06.2005, 23:07
von Chris2005
Der hat mich auch kürzlich "überfallen". Erstmal vor die Tür gesetzt... Wieder eine Suchmaschine, die niemand braucht... Oder glaubt jemand, dass da irgendwelcher Traffic kommen wird? Vor allem sind die Suchergebnisse noch gar nicht zugänglich
Verfasst: 27.10.2005, 12:16
von fool
Hallo zusammen,
hatte heute auch Besuch von dem ConveraCrawler und konnte feststellen,
dass er sich nicht wie auf der Homepage von dem Betreiber:
www.authoritativeweb.com/crawl
an robots.txt -Standard hält. Er ist klasse in die Bot-Trap gegangen.
Die müssen also wirklich noch ein bisschen ihren Bot optimieren.
Solange bleibt er bei mir gesperrt.
IP war 63.241.61.8
UA ConveraCrawler/0.9d
Gruß
fool
ConveraCrawler - authoritativeweb.com/crawl
Verfasst: 27.10.2005, 12:53
von bull
@alle
Es gibt neuerdings auch ConveraMultiMediaCrawler/0.1 (+
https://www.authoritativeweb.com/crawl) aus demselben Hause.
Wer noch mit
in der RewriteCond blockt (und nicht schon den ganzen IP-Bereich abgeklemmt hat
), sollte also auf
umsteigen.
