Syntax zur nocrawlersoft.txt ?

[axelm]

Hi,

in
https://www.abakus-internet-marketing.d ... rsoft.html

wird über einen Bot berichtet.
Wenn man diesen ausperren möchte, reicht es eine
nocrawlersoft.txt
im Root abzulegen oder muss da noch was drin stehen?

[Jörg]

Ich würde den Bot, wie von bull beschrieben, über die .htaccess sperren. Wäre ja noch schöner, wenn man nun für jeden Bot eine eigene Datei anlegen soll.

[robo]

Die erfolglosen Zugriffe auf nocrawlersoft.txt habe ich auch in den Logfiles gefunden. Und über Google habe ich dann weitere Infos zu diesem Mist gefunden.

Kann mich daher nur meinem Vorredner anschliessen: Aussperren und fertig!

cu, Robo

[bull]

Vermutlich ist die Erstellerin der Software nur nicht in der Lage, einen robots.txt-Parser zu implementieren

Mein Vorschlag: bot trap à la webmasterworld mit
RewriteRule nocrawlersoft.txt bottrap.php [L]
kombinieren, dann ist das ganze IP-unabhängig