Wildcard und robots.txt ?

Beitrag von **Thor** » 08.08.2004, 20:45

User-agent&#58; * 
Disallow&#58; /ptopic*.html$

laut Robots.txt Validator funktioniert das nicht, gibt es noch ne andere Möglichkeit ?

PS: Falsche Ecke...kann mal jemand nach https://www.abakus-internet-marketing.d ... /f-52.html verschieben

von **Anzeige von ABAKUS** »

Beitrag von **stalker** » 08.08.2004, 22:07

per mod_rewrite die url als /ptopic/*.html ausgeben und dann in die robots.txt
User-agent: *
Disallow:/ptopic/

Beitrag von **Thor** » 09.08.2004, 16:20

danke dir, daran hatte ich auch schon gedacht, nur kann ich es so nicht umsetzen. Es sind ca. 8-10.000 Seiten mit ptopic123.html im Index, diese auf einmal zu verlieren wäre nicht so klug. Google soll sie nach und nach entfernen und durch die richtigen "topic123.html" ersetzen.