Trackbacks im Googleindex

[Badman]

Ich versteh langsam die Welt nicht mehr. Ich bastle schon ewig bei meinr robots.tx herum und immer wieder rutschen Trackbacks und Feeds in den Googleindex.

Kann mir jemand bei meiner Robots.txt helfen. Die Domain Struktur ist so aufgebaut

https://www.domain.com/index.php/2008/0 ... -der-post/

ich finde ständing dies URLs im Google Index
https://www.domain.com/index.php/2008/0 ... trackback/
https://www.domain.com/index.php/2008/0 ... post/feed/

Meine Robots.txt schaut so aus:

User-agent: *
Disallow:/wp-admin/
Disallow:/cgi-bin/
Disallow:/plugins/
Disallow:/js/
Disallow: /wp-register.php
Disallow: /wp-login.php
Disallow: /wp-trackback.php
Disallow:/wp-themes/
Disallow:/wp-plugins/
Disallow: /wp-
Disallow: /search

Disallow: */trackback$
Disallow: */trackback/$

Disallow: */feed$
Disallow: */feed/$

Was ist daran falsch?

[SchnaeppchenSUMA]

Warum machst du dir die Mühe?

[Malte Landwehr]

Ich hatte früher immer

Code: Alles auswählen

Disallow: /*/feed/$

aber eigentlich indiziert Google doch gar keine Feeds mehr?

[Badman]

doch bei den letzen posts habe ich auch noch die Feeds in den Index bekommen.

dann kann sein dass der / fehlt... ich teste es mal...

[Southmedia]

Bei den Trackback-URLs würde ich einfach mit nofollow verlinken, dann erledigt sich das Problem von selbst. Bei den Feeds hilft folgende robots.txt:

Code: Alles auswählen

User-agent: Googlebot
Allow: /
Disallow: */feed/
Disallow: *feed=rss2*

[Malte Landwehr]

mit nofollow verlinken

Damit ist man aber nicht gegen die Blogger sicher, die gerne von außen auf die ../trackback/ URL verlinken weil sie die gerade in der Zwischenablage haben.

[Southmedia]

Dafür gibt es folgendes Plugin: https://scott.yang.id.au/code/permalink-redirect/
Das leitet unter anderem Aufrufe der /trackback/ direkt auf das Posting. Funktioniert wunderbar.

[Badman]

danke für eure Tipps. ich versuche es.

ich habe das Gefühl das index.php mag die Robots.txt nicht.

https://www.domain.com/index.php/2008/0 ... post/feed/

kann sein dass ich die Zeile so schreiben muß?
Disallow: /index.php/*/trackback$

was aber noch komisch ist.
Im Webmastercentral kann ich mit vorhandener robots.txt die Seiten problemlos löschen. Und auch wenn ich die Robots.txt teste, dann werden die "Trackback-Seiten" als geblockt angezeigt.

bin ein bißchen ratlos

[huah]

Und wenn Du ganz billig in die robots.txt schreibst:

Code: Alles auswählen

Disallow: /feed
Disallow: /trackback

So funktioniert es bei mir einwandfrei. Allerdings sollte bei dieser Version kein Post vorkommen, der in der URL ""feed" oder "trackback" als Bestandteil hat.