Google und die Robots.txt
Verfasst: 30.03.2005, 12:01
Erstmal vorne weg: am Wochende hab ich die Seite neu eingestellt (es gab vorher nur eine einzelne Startseite) und jetzt sind die meisten Unterseiten schon indiziert. Respekt, Google ist schnell. OK, die Seite hatte einen PR von 4, aber trotzdem.
Jetzt habe ich aber verschiedene Bereiche in denen es nichts sinnvolles für die Robots gibt mit der Robots.txt ausgenommen, z.B. Kundenbereich (Login-Seite), Impressum, Kontaktseite.
Wenn man sich jetzt mit site: die indizierten Seiten ansieht sind die 3 Bereiche aber trotzdem gelistet, allerdings ohne Inhalte (Beschreibung). Alle anderen haben Inhalt dabei.
Ist das die normale Vorgehensweise oder dürfte er die Links zu den Unterseiten gar nicht anzeigen? Wie sieht das bei euch aus?
Bei der Suche nach Seitenname und Impressum erscheint der Link trotzdem. Das ist doch nicht Sinn und Zweck der Robots.txt, oder??
Gruß, Holger
Jetzt habe ich aber verschiedene Bereiche in denen es nichts sinnvolles für die Robots gibt mit der Robots.txt ausgenommen, z.B. Kundenbereich (Login-Seite), Impressum, Kontaktseite.
Wenn man sich jetzt mit site: die indizierten Seiten ansieht sind die 3 Bereiche aber trotzdem gelistet, allerdings ohne Inhalte (Beschreibung). Alle anderen haben Inhalt dabei.
Ist das die normale Vorgehensweise oder dürfte er die Links zu den Unterseiten gar nicht anzeigen? Wie sieht das bei euch aus?
Bei der Suche nach Seitenname und Impressum erscheint der Link trotzdem. Das ist doch nicht Sinn und Zweck der Robots.txt, oder??
Gruß, Holger

