Ist meine robots.txt korrekt?

Beitrag von **zxx** » 05.04.2007, 14:36

Hallo,

ich möchte bei meinem Wordpress-Blog das Archiv nicht von Google indexieren lassen. Also Google soll schon den Links folgen (um die interne LinkPop zu erhöhen, hoffe das ist so richtig..) aber die Unterseiten eben nicht indexieren.

Ist das dann so richtig:

Code: Alles auswählen

Disallow&#58; /2007/

Also werden so dann auch die einzelnen Unterordner (2007/04 ; 2007/05 ; usw.) automatisch auch mit ausgeschlossen und nicht indexiert?

Danke für eure Hilfe!

Gruß
zxx

von **Anzeige von ABAKUS** »

Beitrag von **Website** » 05.04.2007, 15:59

Sollen yahoo und etc darauf zugreifen dürfen?
wenn nicht:

User-agent: *
Disallow: /2007/

Beitrag von **zxx** » 05.04.2007, 16:07

Ne, sollen auch ausgeschlossen werden.

Folgt Google den Links denn so trotzdem noch, und wertet die dann als "interne Verlinkung"?

von **Anzeige von ABAKUS** »

SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002

persönliche Betreuung
individuelle Beratung
kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.

Beitrag von **Website** » 05.04.2007, 16:26

Ich dachte eig. dass Google den Links nicht folgt... aber laut meinem counter geht Google bei mir sehr oft auf solche ordner. vll spinnt auch mein counter

Beitrag von **zxx** » 05.04.2007, 17:36

Ist das denn überhaupt sinnvoll mit den internen Links vom dem Archiv aus, oder ist das sowieso egal...?

Beitrag von **Mamboo** » 06.04.2007, 11:48

Du kannst auf der folgenden Seite robots.txt kostenlos generieren lassen:

https://www.art2digital.com/new-media/t ... tellen.php

Beitrag von **zxx** » 06.04.2007, 14:58

OK danke, habe mir da jetzt mal die FAQ durchgelesen.

Aber nochmal zu der Frage von oben.

Wenn ich in der robots.txt stehen habe:

Code: Alles auswählen

User-agent&#58; *
Disallow&#58; /2007/

werden auch die Unterordner von /2007/ (also /2007/04 ; /2007/05/ ; usw.) ausgeschlossen, richtig?

Oder müsste ich dann den Slash am Ende weglassen, also:

Code: Alles auswählen

User-agent&#58; *
Disallow&#58; /2007

?