ich wollte eine Seite vom crawlen auschliessen. Nähmlich den/das Disclaimer.
Meine robots.txt sieht so aus:
jedoch habe ich nun bemerkt, dass Google die Seite auch durchsucht und in den suchergebnissen anzeigt!
was habe ich falsch gemacht?
danke schonmal für antworten!
mfg