robots.txt - Ganze Unterordner sperren?

Beitrag von **thomas_x3** » 10.04.2012, 15:39

Leider sind von meiner Seite immer wieder URL's aus dem Unterordner /components indexiert. Sogar ein Sitelink ist dabei.

Keine Ahnung woher das überhaupt kommt, klar ist aber dass das nicht sein sollte. Nun würde ich gerne in der robots.txt Alle URL's in /components blockieren, nur frage ich mich, geht das überhaupt? Kann ich einen ganzen Tree sperren?

Wenn ich in der robots.txt eintrage:

Code: Alles auswählen

Disallow&#58; /components/

Ist dann auch /components/test/ gesperrt?

von **Anzeige von ABAKUS** »

SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002

persönliche Betreuung
individuelle Beratung
kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.

Beitrag von **chris21** » 10.04.2012, 15:44

Ja.

Kannst Du auch bei Google in den WMT testen.

Beitrag von **thomas_x3** » 10.04.2012, 15:58

chris21 hat geschrieben: Kannst Du auch bei Google in den WMT testen.

Danke für den Hinweis