Hallo zusammen,
Ich habe mir bezüglich der Double Content Geschichte eine Robots.txt Datei zusammen gebaut, wie aus zahlreichen Beiträgen stammen. Nun wollte ich einmal hören, ob jemand noch Verbesserungsvorschläge oder Kritik hat, was man lieber doch nicht aussperren sollte. Anbei die aktuelle Robots.txt Datei:
Disallow: /wp-admin/
Disallow: /wp-content/cache/
Disallow: /wp-content/languages/
Disallow: /wp-content/themes/
Disallow: /wp-content/upgrade/
Disallow: /wp-content/plugins/
Disallow: /wp-includes/
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: /comments/feed/
Disallow: /feed/
Disallow: /feed/atom/
Disallow: /feed/rss/
Disallow: /rss/
Disallow: /trackback/
Disallow: /wp/
Disallow: /*/comments/feed/$
Disallow: /*/feed/$
Disallow: /*/feed/atom/$
Disallow: /*/feed/rss/$
Disallow: /*/rss/$
Disallow: /*/trackback/$
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /xmlrpc.php
Disallow: /trackback/
Disallow: /comment-page-
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads/
Disallow: /feed/
Disallow: /feed
Vielleicht hat ja jemand ein paar Verbesserungsvorschläge übrig.
Archiv
