ABAKUS

Ich habe die rss-feeds in der robots stehen.

hab das analog der sitemaps gemacht.

also

sitemap: https://domain.tld/rss-feed.xml

wolle01 hat geschrieben:Sollte man neben der Sitemap auch ein rss feed in eine robots erwähnen?

Die robots.txt ist kein Inhaltsverzeichnis, sondern gedacht, um Robots von bestimmten Bereichen auszusperren, also quasi das Gegenteil eines Inhaltsverzeichnisses. Wenn du deine Feeds aussperren willst, setze sie mit Disallow: in die robots.txt.

Das Inhaltsverzeichnis steht in der sitemap.xml und genau da gehören dann auch Feed-URLs, die auszulesen sind, rein (wenn überhaupt, es ist ja nicht so, dass Robots aufgehört hätten, die Webseiten selbst zu durchsuchen).

Danke jetzt sehe ich durch.