ABAKUS

Hallo Liebe Community,

Ich habe die Robot ausperr Liste von ABASKUS mir zur Herzen genommen (https://www.abakus-internet-marketing.d ... ts-txt.htm) und diese bei mir eingebaut, in meine .htaccess.

Bekomme dann aber beim aufrufen der Website folgende Fehlermeldung :

500 Internal Server Error
The server encountered an internal error or misconfiguration and was unable to complete your request.
Please contact the server administrator, webmaster@xxxxx and inform them of the time the error occurred, and anything you might have done that may have caused the error.

More information about this error may be available in the server error log.



--------------------------------------------------------------------------------

Apache/1.3.27 Server at xxxxxx Port 80

Wenn mir da jemand weiterhelfen könnte, wäre des super!

Achja selber schon draufgekommen bin ich dumm.
Das kommt natürlich in die robots.txt
Stellt sich mir nurnoch die Frage es gibt ja auch noch eine Möglichkeit böse Bots in der .htaccess zu verbieten. Ist es nun besser dies in der robots.txt zu machen oder in der .htaccess

Ist es nun besser dies in der robots.txt zu machen oder in der .htaccess

"Böse Bots" befolgen i.d.R. nicht die robots.txt...
Daher bleibt dir bei "bösen Bots" eigentlich keine Wahl.