komische seitenaufrufe durch bots
Verfasst: 19.02.2004, 17:45
hallo!
ich habe grad mal robotstats installiert und seh da u.a. seitenaufrufe für urls wie https://domain.de/dir/datei.htmlrobots.txt
wie kommen die bots denn auf sowas? kann das was mit einer fehlerhaften programmierung meinerseits zu tun haben? die urls werden mittels forcetype rewritet.
ich habe grad mal robotstats installiert und seh da u.a. seitenaufrufe für urls wie https://domain.de/dir/datei.htmlrobots.txt
wie kommen die bots denn auf sowas? kann das was mit einer fehlerhaften programmierung meinerseits zu tun haben? die urls werden mittels forcetype rewritet.