Und morgen stört sich jemand am Muster deines Hemdes, na und? Wer nicht will, daß seine Seiten gelesen werden, der soll sie nicht ausliefern.Staudi hat geschrieben:Offensichtlich wird dieses Crawlen von der meldenden Partei als Belästigung empfunden.
Sagt wer?lois69 hat geschrieben:du musst aber die robots.txt berücksichtigen.