Google Crawler erkennt meine robots.txt nicht
Verfasst: 12.11.2009, 08:30
Hallo,
ich betreibe einen Wordpress-Blog unter www.hammeranzeigen.de. Wenn ich mich jedoch bei den Webmaster-Tools von Google einlogge und mir den Status meines Blogs anschaue erhalte ich nur die Meldungen "Durch robots.txt gesperrt Anzahl: 26". Die Seite gibt auch keine weiteren Informationen wie z.B. Suchanfragen im Webmaster-Tool wieder. Ich habe zwei weitere Blogs die die gleiche Konfiguration haben z.B. www.vanillatopics.com. Hier läuft aber alles ordnungsgemäß.
Kann mir jemand einen Tipp geben, wo das Problem liegen könnte?
Vielen Dank im voraus.
Meine robots.txt hat folgenden Inhalt:
User-agent: Googlebot
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /feed/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/
Disallow: /page/
Disallow: /tag/
Disallow: /category/
Disallow: /store/
Disallow: /*?
Disallow: */comment-page
User-agent: Mediapartners-Google*
Disallow:
User-agent: ia_archiver
Disallow: /
User-agent: duggmirror
Disallow: /
User-Agent: Googlebot
Disallow: /link.php
Disallow: /gallery2
Disallow: /gallery2/
Disallow: /category/
Disallow: /page/
Disallow: /pages/
Disallow: /feed/
Disallow: /feed
In meiner Header-Datei habe ich folgende Meta-Information.
<meta name="robots" content="index, follow" />
ich betreibe einen Wordpress-Blog unter www.hammeranzeigen.de. Wenn ich mich jedoch bei den Webmaster-Tools von Google einlogge und mir den Status meines Blogs anschaue erhalte ich nur die Meldungen "Durch robots.txt gesperrt Anzahl: 26". Die Seite gibt auch keine weiteren Informationen wie z.B. Suchanfragen im Webmaster-Tool wieder. Ich habe zwei weitere Blogs die die gleiche Konfiguration haben z.B. www.vanillatopics.com. Hier läuft aber alles ordnungsgemäß.
Kann mir jemand einen Tipp geben, wo das Problem liegen könnte?
Vielen Dank im voraus.
Meine robots.txt hat folgenden Inhalt:
User-agent: Googlebot
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /feed/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/
Disallow: /page/
Disallow: /tag/
Disallow: /category/
Disallow: /store/
Disallow: /*?
Disallow: */comment-page
User-agent: Mediapartners-Google*
Disallow:
User-agent: ia_archiver
Disallow: /
User-agent: duggmirror
Disallow: /
User-Agent: Googlebot
Disallow: /link.php
Disallow: /gallery2
Disallow: /gallery2/
Disallow: /category/
Disallow: /page/
Disallow: /pages/
Disallow: /feed/
Disallow: /feed
In meiner Header-Datei habe ich folgende Meta-Information.
<meta name="robots" content="index, follow" />