Google indiziert Unterseiten nicht

Beitrag von **Kali** » 26.06.2006, 13:11

Hallo allerseits,
wir haben unsere Internetseiten vor einer Woche neu aufgelgt. Interessanterweise hat Google nur die jeweiligen Startseiten in seinem Index erneuert. Bei Yahoo und MSN findet sich ebenfalls nur die aktualisierte Startseite im Index.

Meine Robots.txt:
User-agent: *
Disallow:

Stimmt an dieser etwas nicht, bzw sind euch andere Gründe bekannt, wieso verlinkte Unterseiten nicht im Index der Suchdienste auftauchen ?

von **Anzeige von ABAKUS** »

Beitrag von **klixi** » 26.06.2006, 13:19

willkommen hier im forum

1. Tip Hol Dir einen Kaffee
2. Tip Bring Deinen Arbeitskollegen auch einen mit
3. Tip Nimm die ein paar Kekse zur Hand

und dann kannst Du beginnen fleissig Links zu sammeln und nach ein paar Totensonntagen wirst Du dann Dein Ergebnis sehen und Tante Gurgel wird Dich komplett indexiert haben....

Viel Spass dabei....

Beitrag von **Kali** » 26.06.2006, 13:36

klixi hat geschrieben:willkommen hier im forum

1. Tip Hol Dir einen Kaffee
2. Tip Bring Deinen Arbeitskollegen auch einen mit
3. Tip Nimm die ein paar Kekse zur Hand

und dann kannst Du beginnen fleissig Links zu sammeln und nach ein paar Totensonntagen wirst Du dann Dein Ergebnis sehen und Tante Gurgel wird Dich komplett indexiert haben....

Viel Spass dabei....

Danke. Aber die Seiten haben bereits PR3-5 und sind also verlinkt.

von **Anzeige von ABAKUS** »

SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002

persönliche Betreuung
individuelle Beratung
kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.

Beitrag von **dersimli** » 26.06.2006, 13:39

Wenn die Seiten normal verlinkt sind, dann werden diese noch aktualisiert.

Ich habe folgendes festgestellt: Die Suchmaschinen besuchen die Hauptdomain zuerst. Es kann mehrere Tage oder Wochen dauern, bis diese auch deine Unterseiten besucht und aktualisiert habe. Vielleicht wurden die besucht und werden beim nächsten Durchgang aktualisiert.

Du musst noch etwas Geduld haben... das wird wieder...

Beitrag von **Kali** » 26.06.2006, 14:32

Ok vielen Dank. Dann warte ich einfach mal. Wenn jemand noch ne Idee hat oder ne Optimierung für die Robots-Datei, dann nur her damit

Beitrag von **solomon** » 26.06.2006, 15:46

hallo Kali,
kleine Optimierung wäre vielleicht noch das Aussperren der bösen Spambots.
Spambots via robots.txt aussperren ist möglich, aber es ist sehr fraglich ob sich der Spambot an die Vorschriften der robots.txt hält.
Eine bessere Alternative ist der Ausschluss via .htaccess und der Apache Funktion mod_rewrite.

Code: Alles auswählen

RewriteEngine on

# Spambots nach User_agent aussperren

RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*Whacker.*$ &#91;OR&#93; 
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^EmailCollector &#91;OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^EmailSiphon &#91;OR&#93; 
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^EmailWolf &#91;OR&#93; 
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*FileHound.*$ &#91;OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*TurnitinBot.*$ &#91;OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*JoBo.*$ &#91;OR&#93;
RewriteCond %&#123;HTTP_USER_AGENT&#125; ^.*adressendeutschland.*$
RewriteRule ^.* - &#91;F&#93;

...passt ja nicht zum Titel des Threads, aber vielleicht hälst du uns hier über die Entwicklung Deiner Indizierung bei Google auf dem laufenden

Beitrag von **klixi** » 26.06.2006, 15:49

@ kali

ja schatzi, wenn du schon so weit bist, dann verzeih bitte meine Argumentation...

Dann kannst Du den Kaffee trotzdem weitertrinken, da Deine Seite nun gerade indiziert werden....

gehe auf yourcache.com....dort siehst du, auf welchem dc du schon gelistet wirst...

Beitrag von **Robert Jacobi** » 26.06.2006, 15:53

Hallo,

du kannst auch mal versuchen deine Seite bei Google Sitemaps einzutragen, dann siehst du schon ankurzer Zeit was Google von dir hält und ob Sie dich indizieren werden. Außerdem kann man durch Sitemaps gut sehen wie der Algo funktioniert, wenn man sich mal überlegt warum die dir zeigen, was Sie zeigen.

Viel Erfolg dabei!

Beitrag von **Kali** » 26.06.2006, 15:55

Ok Danke. Yourcache zeigt auf einem kleinen Teil der Server 12300 indexierungen. Die sind jedoch von der kleinen alten Seite. Bei der neuen gilt es nun über 50.000 seiten zu indexieren. Und das bringt dann hoffentlich weiteren Besucherzuwachs. Ich werde dann mal beobachten, ob Google die nun aufnimmt.