robots und rss feed

Beitrag von **wolle01** » 22.09.2009, 09:48

Sollte man neben der Sitemap auch ein rss feed in eine robots erwähnen?

schreibweise bei sitemap ist:
Sitemap: https://www.webadresse.de/sitemap.xml

wenn rss feed reinkommt, wie ist dort die entsprechende schreibweise.

Danke für die Beantwortung der Frage.

Gruß

von **Anzeige von ABAKUS** »

Beitrag von **r-alf** » 22.09.2009, 11:08

Ich habe die rss-feeds in der robots stehen.

hab das analog der sitemaps gemacht.

also

sitemap: https://domain.tld/rss-feed.xml

Beitrag von **Mork vom Ork** » 22.09.2009, 11:43

wolle01 hat geschrieben:Sollte man neben der Sitemap auch ein rss feed in eine robots erwähnen?

Die robots.txt ist kein Inhaltsverzeichnis, sondern gedacht, um Robots von bestimmten Bereichen auszusperren, also quasi das Gegenteil eines Inhaltsverzeichnisses. Wenn du deine Feeds aussperren willst, setze sie mit Disallow: in die robots.txt.

Das Inhaltsverzeichnis steht in der sitemap.xml und genau da gehören dann auch Feed-URLs, die auszulesen sind, rein (wenn überhaupt, es ist ja nicht so, dass Robots aufgehört hätten, die Webseiten selbst zu durchsuchen).

Beitrag von **wolle01** » 22.09.2009, 12:40

Danke jetzt sehe ich durch.