Seite 1 von 1
robots.txt
Verfasst: 24.11.2005, 21:10
von Michael1967
Hallo,
ich habe mal eine Frage.
Wie kann ich über die robots.txt verhindern, dass Google diese Links in den Index aufnimmt?
/modlink-1.html
/modlink-2.html
/modlink-3.html
Das ganz geht bis 3587. Also insgesammt 3587 Links.
robots.txt
Verfasst: 24.11.2005, 21:20
von Hobby-SEO
Hallo Michael,
die Lösung lautet:
User-agent: Googlebot
Disallow: /modlink
Nach dieser robots.txt müsste alles, was mit "modlink" beginnt, vom Indizieren ausgenommen werden. Googlebot versteht im Gegensatz zu anderen Bots aber auch Platzhalter. Folgendes müsste also auch funktionieren:
User-agent: Googlebot
Disallow: /modlink*
Kleine Anmerkung noch: Die URLs werden voraussichtlich trotzdem im Google-Index landen - aber halt ohne Description.
LG, Hobby-SEO
Verfasst: 24.11.2005, 21:23
von Michael1967
Vielen Dank für die schnelle Antwort.
Das ist echt blöd. Nun habe ich alles doppelt im Google-Index.
Der Link ist zum ändern eines Links gedacht und enthält deswegen den selben Inhalt.
Das mögen die Sumas ja nicht! Oder?