Crawling Fehler "nicht gefunden"-wie nachträglich

[Pfauli]

Hallo Zusammen

Ich habe das Forum nach passenden Überschriften durchforstet - leider ohne Erfolg. Und zwar habe ich - wie in der Überschrift zu lesen - folgendes Problem.

In den Webmastertools unter Crawling Fehler bei "nicht gefunden" sammeln sich immer mehr Seiten an, die ich teils schon seit 1-2 Jahren nicht mehr online habe. Von meinem Provider aus habe ich eine 404 Seite, aber das scheint wohl eine extrem schlechte Lösung, bis gar keine Lösung zu sein. Nun bin ich mit meinem Latein am Ende, denn egal, ob ich 5min oder 5 Tage mich dort durchlese, ich finde nicht die Lösung meines Problems und hoffe, ihr könnt mir helfen, was ich tun muss.

Wie bekomme ich all diese Seiten, die nicht mehr existent sind weg?
Weiß jemand Rat?

[Freddixx]

Hast du ne Sitemap mit der Webseite verknüpft?

[rico]

dann leite die seiten per 301 redirect um

[Pfauli]

Moin ihr beiden

Ja, eine Sitemap habe ich natürlich und im Verlaufe der Zeit wurde es eine sitemap.xml.
Früher hatte ich eine sitemap.txt, dann konnte/sollte man ja auf xml umstellen.
Das hab ich höriger Bürger dann auch getan.

Und da kommt gleich die zweite Frage im Gehirn vorbei geschossen:
Als "nicht gefunden" wird auch die alte sitemap, die .txt angezeigt (letzte Mal online 2009)
Kann man dann auch eine .txt umleiten?
Wohin leitet man denn um? Es ist ja nicht so, dass neue Seite an die Stelle traten.
Ich hatte damals meine Webseite auf Englisch und Deutsch. Englisch besuchte so gut wie niemand, und ich wurde überdrüssig dessen, weil es ja bei mir um Bilder als Fotograf geht und die sind ja UNI-sprachlich ... das bisschen Content drum herum .. also habe ich alles auf Englisch gelöscht und nichts ersetzt.

Bis auf zwei externe Webseiten, bezieht sich die Meckerei von Webmastertools nur auf interne Links, die beiden Webseiten habe ich schon informiert.

[Malte Landwehr]

Kann man dann auch eine .txt umleiten?

Du kannst prinzipiell alles umleiten.

Wohin leitet man denn um? Es ist ja nicht so, dass neue Seite an die Stelle traten.

Auf die thematisch passendste Unterseite. Alternativ auf die übergeordnete Kategorie. Im Notfall auf die Startseite.

[...]also habe ich alles auf Englisch gelöscht und nichts ersetzt.

Dann leite von jedem "englischen 404" auf die entsprechende deutsche Unterseite.

[Pfauli]

Hm, okay!

Das Prinzip habe ich verstanden, lässt sich bei meiner schmalen Webseite ja auch noch gut realisieren.

Warum kann man eigentlich nicht den Webmastertools anweisen: Bitte alte Seiten aus dem Index löschen? Wie sieht es das dann im Jahre 2050 aus? Das Internet besteht zu 60% alten 301 und 40% aktiven Seiten. Die Crawler suchen sich doch in der Zukunft "'nen Wolf" bei so vielen Umleitungen....?

Ein Glück, dass keine Ampeln eingeführt werden

[templer]

In den Webmastertools unter Crawling Fehler bei "nicht gefunden" sammeln sich immer mehr Seiten an, die ich teils schon seit 1-2 Jahren nicht mehr online habe.

Exakt das Gleiche bei mir auch seit zwei Wochen, vorher stand dort nichts.
Von den 20 Seiten sind nur noch ein existierender Backlink den ich per 301 umgeleitet habe.
Die restlichen 19 "Crawlingfehler" kommen von internen Seiten, die es teilweise seit zwei Jahren nicht mehr gibt.
Irgendwie sollte man sich auf diese Anzeige momentan nicht verlassen.

[Beloe007]

Wie bekomme ich all diese Seiten, die nicht mehr existent sind weg?
Weiß jemand Rat?

Ignorieren, die gehen ganz von alleine.

Ist aber super zum beobachten um eventuell vergessene 301 nachträglich zu setzen.

[luzie]

ich finde nicht die Lösung meines Problems

... die Lösung lautet: es gibt kein Problem! warum sollte das ein Problem sein, dass Google sich alte Seitenadressen ewig merken will? Wenn überhaupt, dann ist das schon eher deren Problem, offensichtlich haben sie genügend crawling-Kapazität um auch extensiv immer wieder nach alten Adressen zu kucken, ob die nicht vielleicht doch mal wieder kommen

[Beloe007]

Ich will nicht wissen wie viel Zeit mit Problemen die keine sind verplempert wird

[Pfauli]

ich finde nicht die Lösung meines Problems

... die Lösung lautet: es gibt kein Problem! warum sollte das ein Problem sein, dass Google sich alte Seitenadressen ewig merken will? Wenn überhaupt, dann ist das schon eher deren Problem, offensichtlich haben sie genügend crawling-Kapazität um auch extensiv immer wieder nach alten Adressen zu kucken, ob die nicht vielleicht doch mal wieder kommen

Na ja ...

Es wird halt immer unübersichtlicher.
Ich möchte doch überwachen, ob ich wirkliche Fehler einbaue,
aber dieser ganze Wust an toten Links macht alles kaputt und lässt nicht mehr differenzieren.
Ebenso bei Yahoo - wenn ich meine Seite, alle Seiten dort abfrage, ist dort
nahezu das Dreifache an surreal existenten Links aufgelistet.

Ich verstehe das nicht.
Gerade habe ich mit meinem Provider (Domain Factory) telefoniert,
wollte in Erfahrung bringen, ob es richtig ist, eine .thaccess für meine
statische Webseite einzurichten, oder ob ich eine andere Variante wählen sollte.
Der Kontakt am Telefon sagte mir: Kein Problem, aber wenn ihre alten Unterseiten
nicht mehr existent sind, dann verschwinden die früher oder später eh von selbst.

Ignorieren, die gehen ganz von alleine.

Da ich hier von Links aus den Jahren 2009 und 2010 rede, glaube ich aber nicht mehr daran.

PS: Mit verplempern sagst Du das Stichwort, Beloe007.
Mir stellt sich nun die Frage 301, 302, oder nichts machen, weil - wie bei jedem hier, das reale Leben weitaus wichtigere Aufgaben an einen stellt.
Da ich nicht so der Crack bin, habe ich schon etwas Schiss, das dies sich negativ auswirken könnte, wenn ich es so lasse. Ist das was dran?

[Beloe007]

Da ich nicht so der Crack bin, habe ich schon etwas Schiss, das dies sich negativ auswirken könnte, wenn ich es so lasse. Ist das was dran?

Ja, Nein, Vielleicht.

[Pfauli]

Wer von Euch hier ist denn von Google?
Ein paar Stunden seit meinem letzten Post hier sind gaaaanz plötzlich
sämtliche Anträge zum Löschen der Seiten gewilligt worden, na sowas