Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

warum gehorcht slurp einfach nicht!!!!

Alles Rund um Bing, Yahoo! Suche und andere Suchmaschinen.
Neues Thema Antworten
austrian-x
PostRank 4
PostRank 4
Beiträge: 148
Registriert: 14.03.2008, 11:01

Beitrag von austrian-x » 14.06.2008, 00:18

ich hasse diesen bot, der will einfach nicht hören, ich bin kurz davor diesen deppen per htaccess zu sperren, ich hab schon alles gemacht...

User-agent: Slurp
Crawl-delay: 3600

User-agent: Yahoo! Slurp
Crawl-delay: 3600

hilft alles nix, meine seite hat um die 90.000 pages, und der bot zwingt den server in die knie. wenn über yahoo suchmaschinen-traffic kommen würde- OK, aber nur crawlen und keine besucher, ärgerlich!

was kann man sonst noch machen?