Herzlich willkommen im Archiv vom ABAKUS Online Marketing Forum
Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.
bugscout hat geschrieben:moin mario,
das mit disallow in den robots.txt kannst du knicken.
da kannst du auch ein schild an die haustür machen
"einbrechen verboten".
da wäre es besser auf jeder homepage einen hinweis
zu schreiben, dass die daus nicht auf die spam-mail
klicken sollen.
sowas wie mit den zigarettenschachtel-aufklebern.
grüsse
Hi,mario hat geschrieben:Wird der Disallow-Befehl in der robots.txt von solchen Crawlern überhaupt befolgt?
Nö, kannst Du nicht vergessen. Mußt Sie nur mit .htaccess statt der robots.txt aussperren. Übrigens: hier gibt es auch eine gute Suchfunktion .... Schau Dir mal die Lösung von Viggen an.mario hat geschrieben:also freche Saubande? Respekt- uns skrupellos? Macht den Anschein, schade.... also dann vergessen?