Raus aus dem Index. Brauche Expertentip

[Autovermieter]

Hallo an aller Experten.

Ca. am 07.01.2009 bin ich mit div. Domains von heute auf morgen aus dem Googleindex geflogen. Meine Hauptdomain wurde bei Google seit 10 Jahren mit den Hauptwörtern auf Platz 1 bis 5 gefunden.

Keine Sorge, ich jammere Euch jetzt hier nichts vor, denn es geht um was ganz anderes.

Da ich seit ca. 1 Jahr bei Google Webmastertools angemeldet bin, habe ich dort man schön zum Lesen angefangen.
Ich konnte dort auch sehen, dass der Googlebot ca. seit Jahreswechsel nicht mehr auf meine Domain kam.
Seit ca. 10 Tagen habe ich vergeblich versucht, dass der Bot eine neu erstellte robots.txt und sitemap.xml liest.
Es kam immer wieder die Meldung: "robots.txt und Netzwerk nicht erreichbar" und lt. Webmastertools seien diverse Unterseiten ( ca. 30 Stück) abwechselnd nicht erreichbar.
Ein extra installiertes Tools zeigte mir dass mein Server die letzten 10 Tage nur einmal für 5 Sekunden offline war.
Ich bekam nun den Tip, dass evt. die "Ip-Adresse des Googlebots" bei meinem Provider gesperrt ( worden ) sei.

Als ich meinem Provider heute Früh diesbezüglich ne Mail geschickt hatte bekam ich folgendes Antworten:

1.) "eine Sperrung der IP findet nicht statt. Ich habe eben nocheinmal den Apacheserver durchgeladen".
2.) "Es könnte sich um ein Problem am Webserverdienst handeln".

Lange Rede kurzer Sinn:

Nachdem bei meinem Provider "was auch immer verändert" wurde konnte der Googlebot lt . Webmastertool sofort wieder draufzugreifen.

Ich habe allerdings bei den Antworten das Gefühl "etwas verarscht zu werden". Was für ein Fehler kann vorgelegen haben, wenn ich eine robots.txt ( sie war im richtigen Verzeichnis ) am Bildschirm sehe, d.h. mit www.meinedomain.de/robots.txt und der Googlebot sie aber nicht findet bzw. nicht lesen kann.
Ich sehe meine Seiten und lt. Googlebot sind immer irgendwelche offline und das offensichtlich seit ca. Jahreswechsel.
Da brauche ich mich nicht zu wundern, wenn ich aus dem Index bin.

Würde mich über Antworten freuen, aber bitte nicht zu viel Fachchinesisch.

Mein Provider?
Das darf ich natürlich nicht so einfach schreiben.
Aber: Wie nennt man es, wenn man einen Urlaub bucht, wo "Essen und Trinken" im Preis "kostenlos" dabei sind? Man nehme davon die Englische Kurzform und hänge dot com dran.....
( egal mit c oder k oder mit oder ohne Bindestrich )

Gruss

[lloy]

Ich habe selbst die ein oder andere Seite bei besagtem Provider und kenne zudem etliche Leute, die dort hosten.

Die Wahrscheinlichkeit, dass die Ursache Deine Problems dort zu suchen ist, halte ich für eher gering.

Und: Eine fehlende / nicht erreichbare robots.txt ist normalerweise kein Grund, dass eine Domain abschmiert.

[Autovermieter]

Hy, ich will meinem Provider ja nix böse. Bin dort seit 5 Jahren und zufrieden.
Aber wenn z.B. bei einem Update was schiefgelaufen ist oder etwas falsch konfiguriert wurde, dann soll er halt was sagen.... und mir keinen Unsnn erzählen.

[lloy]

Warum fragst Du dann, wenn Du den "Schuldigen" schon lokalisiert hast?

[Autovermieter]

Hast Du eigentlich mein Posting gelesen?
Ich habe geschrieben, dass div. Seiten unteranderem auch die index.html offensichtlich nur für den Googlebot nicht erreichbar waren und das muss ja einen Grund haben.
Es ist nur schon sehr auffällig, dass es nach einer kurzen Änderung des Providers plötzlich geht. Das sind zuviele Zufälle auf einmal. Wenn Du eine andere Idee hast, woran es gelegen haben könnte, dann höre ich Dir gerne aufmerksam zu.

[catcat]

Hast Du kurz vor der fraglichen Zeit irgendwas geändert?
Anderes trackingtool, neue JavaScripte, an der .htaccess rumgefummelt, an den Servereinstellungen "optimiert" oder einfach mal ein bischen was Neues versucht?

Oder jemand aus Deinem Unternehmen? Ein externer Dienstleister?

[lloy]

[quote]Hast Du eigentlich mein Posting gelesen? [quote]

Ja. Aber egal, ich wünsche Dir noch viel Spass bei der Fehlersuche

[Autovermieter]

Es wurde rein gar nichts geändert
Ich ändere nur 1 mal / Woche auf der Seite und "tagesdatum", damit für den Bot eine Veränderung stattgefunden hat ( und das seit 10 Jahren ).

Ich befürchte es lag einfach nur an einer für den Bot nichtauffindbaren index Seite.

[Thomas B]

https://blog.xantiva.de/archives/67-Net ... chbar.html

[lloy]

Nochmal:

Du nennst keine Domain, äußerst wilde Vermutungen und dann meckerst Du auch noch rum. Danke.

[Autovermieter]

[quote="lloy"][quote]Hast Du eigentlich mein Posting gelesen? [quote]

Ja. Aber egal, ich wünsche Dir noch viel Spass bei der Fehlersuche [/quote]

Meine Antwort war nicht böse gemeint ( ob Du es gelesen hast ) Sorry.

Schuld sind wahrscheinlich die für den googlebot nicht auffindbaren Seiten.

Ob nun der Provider der Schuldige ist weiss ich nicht. Das ist jetzt auch 2 rangig. Hauptsache es geht wieder. Mich interessiert in 1. Linie einfach nur, was schiefgegangen ist nicht wer das gemacht hat....

[Autovermieter]

[quote="Thomas B"]https://blog.xantiva.de/archives/67-Net ... chbar.html[/quote]

Genau aus diesem Posting hatte ich ja den Tip mit der IP Adresse

[Vegas]

Nicht so schüchtern mit der URL, denn ohne sich das Ganz mal genauer anzuschauen, können alle hier auch nur wild spekulieren.

[Autovermieter]

Nachtrag:

Heute Früh um 7 den "Googlespider aktiviert" und im 13:00 bin ich wieder im Index auf Platz 4. ( und das nach ca. 21 tagen ganz draussen)

URL: Du bekommst ne ehrliche Antwort: Die Domains ist technischer und optischer Stand 1998 und sieht entsprechend aus. Einfachtses HTML ohne Schnickschnack. Für mich zählt nicht die Optik, sondern wo ich bei Google stehe.... Kümmere mich aber trotdem gerade um eine Neugestaltung und vorher "sag ich nix".

[Fritzenstein]

Nachtrag:

Heute Früh um 7 den "Googlespider aktiviert"

und wie ist Dir das nun gelungen?