Ich bin auf der Suche nach Hilfe, wie ich die u.a. Datenkraken wie Aboutus, Domaintools, Siteinfo, usw. von meinen Seiten aussperren kann. Die Anbieter sammeln zu viele Informationen über meine Person und meine Seiten.
Könnten wir hier eine IP Liste für die HTAccess erstellen und eine Botliste für die Robots- bzw. kennt jemand schon eine Sammlung?
htaccess:
// domaintools & aboutus
Order Deny,Allow
Deny from 66.249.16.0/23
robots:
User-agent: AboutUsBot
Disallow: /
User-agent: SurveyBot
Disallow: /
Archiv