ABAKUS

Verfasst: **17.08.2005, 20:17**

wie ich sehe gibt es offenbar ein neues fast (...)crawler problem

bei mir war folgender:

Host&#58; 81.93.165.151   /robots.txt  
  Http Code&#58; 200  Date&#58; Aug 17 16&#58;31&#58;17  Http Version&#58; HTTP/1.1  Size in Bytes&#58; 188  
  Referer&#58; -  
  Agent&#58; schibstedsokbot &#40;compatible; Mozilla/5.0; MSIE 5.0; FAST FreshCrawler 6; Contact&#58; webcrawl@schibstedsok.no;&#41;  
 
 |  
 |  
 |  
   /  
  Http Code&#58; 200  Date&#58; Aug 17 16&#58;31&#58;17  Http Version&#58; HTTP/1.1  Size in Bytes&#58; 2184  
  Referer&#58; http&#58;//www.urlgeändert.com/links_weiterleiten.asp?url=http&#58;//www.meineurl.biz/  
  Agent&#58; schibstedsokbot &#40;compatible; Mozilla/5.0; MSIE 5.0; FAST FreshCrawler 6; Contact&#58; webcrawl@schibstedsok.no;&#41;

Die Url gibt mir keinen schlauen anhaltspunkt über den nutzen für mich.

Deshalb werde ich die htacces nach UA schibstedsok.no sperren.

MfG

FB

Hochwertiger Linkaufbau bei ABAKUS:

Google-konformer Linkaufbau
nachhaltiges Ranking
Linkbuilding Angebote zu fairen Preisen
internationale Backlinks

Wir bieten Beratung und Umsetzung.
Jetzt anfragen: 0511 / 300325-0

Verfasst: **17.08.2005, 20:39**

Gehört zu Aftenposten.no , einer norwegischen News-Seite.

Siehe auch https://www.webmasterworld.com/forum11/2918.htm

ABAKUS

schonwieder fast (fresh)crawler!!!

schonwieder fast (fresh)crawler!!!

schonwieder fast (fresh)crawler!!!