Indizierung von Seiten wird immer langsamer

Beitrag von **puschtie** » 11.02.2010, 19:34

Hi,

ich betreibe das Forum https://www.sportwettentalk.com. Nun fällt mir seit einiger Zeit auf das neue Beiträge einfach nicht mehr von google indiziert werden - früher ging das ganze viel zügiger.

Mal ein Beispiel:
https://www.sportwettentalk.com/mit-spo ... t-502.html

ist vom 03.02.2010 und wird nicht gefunden.

Ist dies möglich irgendwie zu beschleunigen, oder woran liegt dies überhaupt?

Danke
Puschtie

von **Anzeige von ABAKUS** »

Beitrag von **Malte Landwehr** » 11.02.2010, 20:00

Hast du es schon mit einer XML-Sitemap versucht? Mehr (Deep)links helfen auch oft.

PS
Warum betreibst du unter /archive/index.php ein Archiv für Bots und verlinkst es sogar im Footer, wenn du es dann per Robots.txt sperrst?

Beitrag von **w3news** » 11.02.2010, 20:29

Wird doch gefunden: https://www.google.de/search?sourceid=n ... t-502.html

Cache vom 08.02.2010.

von **Anzeige von ABAKUS** »

Beitrag von **sumacrusader** » 12.02.2010, 09:39

das ist halt unterschiedlich, einige Seiten von mir sind nach Minuten im index andere brauchen paar Tage, einfach abwarten

Beitrag von **Mukkifarmer** » 12.02.2010, 10:43

Hier mal meine Antwort zum Thema Google wird immer langsamer.

Produkt
https://www.muskelfarm.de/mammut-formel ... -7713.html

Aufgenommen 07.2009

Google XML Sitemaps, Status keine Fehler, also OK.

7 !!! Monate und die Seite steht immer noch nicht im Index.

Vielleicht kann da ja mal einer in seine Glaskugel schauen und was zu sagen. ^^

Beitrag von **sumacrusader** » 12.02.2010, 10:55

Also erstmal dauert es bei mir ungefähr 30 Sekunden bis die Seite überhaupt kommt, vermutlich haste den Produkt Text kopiert und 100 andere Seiten haben den identischen Text

Beitrag von **web_worker** » 12.02.2010, 10:59

Also meine Seiten (z.B. neue Kontaktanzeigen) sind im Schnitt innerhalb 2-3 Minuten nach Erscheinungszeitpunkt im Index. Ich pinge Google allerdings bei Veröffentlichung auch an.

Beitrag von **puschtie** » 12.02.2010, 11:15

Malte Landwehr hat geschrieben:Hast du es schon mit einer XML-Sitemap versucht? Mehr (Deep)links helfen auch oft.

PS
Warum betreibst du unter /archive/index.php ein Archiv für Bots und verlinkst es sogar im Footer, wenn du es dann per Robots.txt sperrst?

Also XML sitemap habe ich, das mit den Sperrungen in der robots wusste ich gar nicht, ist mir auch gar nicht bewusst das ich das eingestellt habe

aktuell ist da eh ein hhaufen gesperrt:

User-agent: msnbot
User-agent: googlebot
#Disallow: /showthread.php*$
Disallow: /member.php*$
Disallow: /search.php*$
Disallow: /memberlist.php*$
Disallow: /calendar.php*$
Disallow: /newreply.php*$
Disallow: /private.php*$
Disallow: /newthread.php
Disallow: /online.php
Disallow: /archive

Macht das überhaupt sinn irgendws davon auszusperren?

@Webworker
Wie pinge ich google an um über eine neue Seite zu berichten?

Beitrag von **puschtie** » 12.02.2010, 15:31

Kann wer eine Aussage dazu machen?

Gruß
Pusti

Beitrag von **w3news** » 12.02.2010, 15:32

Und in dem Archiv sind auch die php- Versionen verlinkt, sollte man dann auch ändern, wenn man es in der robots.txt geändert hat.

Beitrag von **puschtie** » 12.02.2010, 16:33

??ka was du meinst oder was ich da jetzt machen soll?

Beitrag von **w3news** » 12.02.2010, 17:08

Wenn ich in den Archiv-Modus gehe, der im Footer steht und eigentlich für Sumas gedacht ist, dann steht da bei dem Thread- Link (Aktuelle Version), ein Link zur PHP- Datei, auf dem "richtigen" Forum werden allerdings die Threads statisch ausgegeben.

Beispiel statisch: https://www.sportwettentalk.com/mit-spo ... t-502.html
und dynamisch: https://www.sportwettentalk.com/showthread.php?tid=502

Wird aber umgeleitet, also wenigstens etwas...

Beitrag von **puschtie** » 12.02.2010, 19:02

Achso, ja die Domainnamen werden von einem SEO tool umgeändert, da kann ich das mit dem Archiv vermutlich nicht beeinflussen nehme ich an.

Was ich aber jetzt immer noch nicht weiß - laut robots wird ja auch zb members.php geblockst usw -----macht doch normal auch keinen Sinn oder?

Beitrag von **Robbiani** » 24.02.2010, 14:00

Hallo putschi,

User-agent: msnbot
User-agent: googlebot
#Disallow: /showthread.php*$
Disallow: /member.php*$
Disallow: /search.php*$
Disallow: /memberlist.php*$
Disallow: /calendar.php*$
Disallow: /newreply.php*$
Disallow: /private.php*$
Disallow: /newthread.php
Disallow: /online.php
Disallow: /archive

Macht das überhaupt sinn irgendws davon auszusperren?

Ich betreibe auch eine Portal-Seite mit einem Forum, ich hab alles ueber die robots.txt gesperrt, wo Gaeste auch nicht hinkommen. Bei normalen Leuten ist es ja sinnvoll, dass sie eine Fehlermeldung mit einer Registrierungsseite erhalten. Aber Google und Co. koennen sich auch mit etwas anderem beschaeftigen als mit Fehlermeldungen. Von daher ist das schon sinnvoll.

Dann hab ich noch zwei Unterforen fuer spiders gesperrt, die aktuelle Nachrichtenmeldungen enthalten, die groesstenteils nur kopiert worden sind. Dies ist hab ich wegen des duplicate content den spiders unzugaenglich gemacht.

@Webworker
Wie pinge ich google an um über eine neue Seite zu berichten?

Das wuerde mich auch interessieren.

Grusss

Robbiani

Beitrag von **web_worker** » 24.02.2010, 14:15

@Webworker
Wie pinge ich google an um über eine neue Seite zu berichten?

Google Blog Search (bedient mE auch den Index) via externe Schnittstelle von pingomatic.com

Funktioniert einwandfrei.

Gruß,
ww