Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

Baidus der Chinese

Alles zum Thema: Robots, Spider, Logfile-Auswertung und Reports
Neues Thema Antworten
Luckybuy3000
PostRank 7
PostRank 7
Beiträge: 543
Registriert: 07.11.2003, 08:49
Wohnort: Essen

Beitrag von Luckybuy3000 » 13.08.2004, 07:31

Chinesisch spreche ich leider nicht. Wie werde ich Baidus auf Dauer los ?
Scheinbar macht er sich nichts aus der robots.txt.Denn da steht:

User-agent: Baiduspider+(+https://www.baidu.com/search/spider.htm)
Disallow: /

Ist der Eintrag in der robots.txt denn falsch ?

Baidu mag uns und kommt immer wieder.
202.108.249.176 - - [12/Aug/2004:23:34:22 +0200] "GET /cheats.html HTTP/1.1" 200 15638 "-" "Baiduspider+(+https://www.baidu.com/search/spider.htm)"