XML-Sitemap und robots.txt?

Beitrag von **jo.da** » 13.10.2009, 10:17

Hallo zusammen,

wird die robots.txt und die reale Struktur/Info von Google zusätzlich berücksichtigt wenn bereits eine XML-Sitemap ausgewertet wird?

Grüße
jo

von **Anzeige von ABAKUS** »

Beitrag von **Mork vom Ork** » 13.10.2009, 10:54

jo.da hat geschrieben:wird die robots.txt und die reale Struktur/Info von Google zusätzlich berücksichtigt wenn bereits eine XML-Sitemap ausgewertet wird?

Ja. Eine Sitemap ersetzt nicht den tatsächlichen Durchlauf des Bots, sie kann ihn bestenfalls ergänzen, dann und wann leicht optimieren (und ich behaupte einfach, in der Masse ist sie fast immer überflüssig). So gesehen passiert eher das Gegenteil dessen, was du in deiner Frage darstellst: Die Sitemap wird zusätzlich berücksichtigt, nicht die normale Struktur.

Beitrag von **jo.da** » 13.10.2009, 11:11

Danke für die Info.

Wird dann eine Sitemap ignoriert wenn ich per robots.txt ein Scannen der Struktur verbiete?

Beitrag von **Lord_Chaos** » 13.10.2009, 12:14

Ignoriert wird die Sitemap nicht, an die robots.txt Sperre hält sich Google dennoch - ich habe in den WMT mal eine entsprechende Warnung bekommen. In jedem Fall würde ich aber in die Sitemap keine URLs aufnehmen, die du nicht indexiert haben möchtest.