aus google, msn und yahoo index geflogen

[x-plosiv]

hallo zusammen

ich habe ein spezial fall, so etwas habe ich noch nie gehabt. ihr hoffe ihr könnt mir ein paar tipps geben.

ausgangslage: die seite war seit ca. 12/06 im index von google, msn und yahoo.
naürlich noch ohne pr und/oder guten rankings, aber indexiert.

ebenfalls weiss ich auch, dass der besitzer der seite viel dc hat, sprich viele seiten mit sehr ähnlichem inhalt, meist nur der erste satz ist anders.

gleichzeitig hat er überall die selben titel und metatags.

ich weiss beide sachen können tötlich sein, vorallem bei google.

nichts desto trotz wurde die domain in den sumas aufgenommen.

nun seit ca. 3 wochen stelle ich fest, dass eine seite nach der anderen aus dem index verschwindet. ich weiss, dieses "problem" haben zur zeit ach viele, also dachte ich mir keine panik.

nun ist aber der supergau eingetroffen, denn diese domain wurde komplett aus google und msn eleminiert, seit heute hat sie auch nur noch vereinzelte seiten bei yahoo im index. ist also nur eine frage der zeit, bis sie auch da verschwunden ist.

ebenfalls ist mir bewusst, dass die seite sehr wenige backlinks hat.

aber trotzdem finde ich es sehr merkwürdig, dass ich gleich aus allen 3 sumas rausflliege oder nicht?

ich habe auch versucht google sitemape einzubauen, jedoch sagt google immer sie könne die seite nicht erreichen, obwohl alle rechte etc. richtig gesetzt sind. habe dies ja auch schon öfters gemacht.

irgendwie habe ich den verdacht, dass gewisse ips gesperrt werden oder ähnliches, obwohl der besitzer dies verneint. denn ich wollte gestern die domain auch von einem tool prüfen lassen und dieses tool konnte mir überhaupt keines infos angeben, also ob der server nicht erreichbar wäre, obwohl ich die seite sehr wohl erreichen kann.

kann es wirklich sein, dass diese domain bei allen 3 sumas praktisch zeitgleich abgestraft wurde bzw. eleminiert wurde? ich kanns mir einfach nicht vorstellen.

ich hoffe ihr könnt mir weiterhelfen.

es haltet sich um den tintenpatronen shop https://www.tintenprofi.ch

[Kralle]

Du beantwortest dir die Frage ja quasi schon selbst:
die Seite ist für Bots nicht erreichbar. Warum auch immer...
robots.txt... .htaccess... Server-Konfiguration...

P. S.: Wirklich seit 12/06? Hast du ne Kristallkugel *lol*?

[x-plosiv]

Du beantwortest dir die Frage ja quasi schon selbst:
die Seite ist für Bots nicht erreichbar. Warum auch immer...
robots.txt... .htaccess... Server-Konfiguration...

P. S.: Wirklich seit 12/06? Hast du ne Kristallkugel *lol*?

das war einfach meine vermutung, wusste aber nicht wie ich das testen kann.

wie hast du das getestet?

auf jedenfall vielen dank für deine hilfe, da muss ich wohl doch einen einen kopf kürzer machen

[800XE]

die Seite ist für Bots nicht erreichbar. Warum auch immer...
robots.txt... .htaccess... Server-Konfiguration...

wie hast du das getestet?

na, wie hat er wohl getestet .... wahrscheinlich garnicht, sondt hätte er ja gesagt warum

https://www.tintenprofi.ch/robots.txt = gibts nicht, also kann das nicht das prob sein
Haben die SUmas was gegen http-Header
Cache-Control: no-store, no-cache
Pragma: no-cache

das "no-store" klingt nach "noindex"

[martinc]

Ich hab gerade nicht mein selfhtml vollständig im Kopf, aber sind
im Header Komentare erlaubt? Ansonsten fällt mir nur das schon
gesagte ein.

[marc75]

ausgangslage: die seite war seit ca. 12/06 im index von google, msn und yahoo.

warte bis Dezember, dann ist die Seite wieder im index.

[Kralle]

Nee, hab's nicht getestet, bin nur da drauf eingegangen:

ich habe auch versucht google sitemape einzubauen, jedoch sagt google immer sie könne die seite nicht erreichen, obwohl alle rechte etc. richtig gesetzt sind. habe dies ja auch schon öfters gemacht.

Also hab nochmal näher geguckt. An robots.txt kann's nicht liegen, da die nicht existiert. Hast du IPs in deiner .htaccess geblockt?
Ansonsten würd ich mal den Quelltext überarbeiten, manchmal reagieren die Bots allergisch auf nicht geschlossene Tags.

[haha]

Cache-Control: no-store, no-cache

das "no-store" klingt nach "noindex"

Nein, no-store klingt nach nach no-store (nicht speichern), d.h. die Seite soll bitteschön nicht längerfristig gespeichert werden, nach Möglichkeit überhaupt nicht auf nicht-flüchtigen Speichermedien. Das trifft im manuell zugänglichen Bereich am offensichtlichsten auf Dienste wie archive.org zu, aber AFAIK auch Googles Cache, d.h. das, was sich hinter dem kleinen "im Cache" in dem Suchergebnissen verbirgt.

sind im Header Komentare erlaubt?

In welchem Header, im <head>-Block? Ja.

[luigip]

ebenfalls weiss ich auch, dass der besitzer der seite viel dc hat, sprich viele seiten mit sehr ähnlichem inhalt, meist nur der erste satz ist anders.

gleichzeitig hat er überall die selben titel und metatags.

ich weiss beide sachen können tötlich sein, vorallem bei google.

ebenfalls ist mir bewusst, dass die seite sehr wenige backlinks hat.

Nimm zu deinen Erkenntnissen noch den Wegfall des Newbie-Bonus dazu. Reicht es dann nicht für einen Kick?? Ich finde schon!

irgendwie habe ich den verdacht, dass gewisse ips gesperrt werden oder ähnliches, obwohl der besitzer dies verneint. denn ich wollte gestern die domain auch von einem tool prüfen lassen und dieses tool konnte mir überhaupt keines infos angeben, also ob der server nicht erreichbar wäre, obwohl ich die seite sehr wohl erreichen kann.

Sendet diese tool einen UA? Wenn nein kann es sein, dass es deswegen ausgesperrt wird. Die SUMAS sind wohl nicht geblockt, sonst wäre die site erst gar nicht in den Index gekommen.


Bei Yahoo sind viele Seiten mit session-ids zu finden!
Also lies dir erst mal die Grundlagen durch und mach deine Hausaufgaben bevor du über das Verhalten der SUMAS jammerst.
Und wie bereits angesprochen: Der Validator kotzt. Hier kannste gleich weiter machen, auch wenns mit deinem Problem nichts zu tun hat.

[x-plosiv]

Nee, hab's nicht getestet, bin nur da drauf eingegangen:

ich habe auch versucht google sitemape einzubauen, jedoch sagt google immer sie könne die seite nicht erreichen, obwohl alle rechte etc. richtig gesetzt sind. habe dies ja auch schon öfters gemacht.

Also hab nochmal näher geguckt. An robots.txt kann's nicht liegen, da die nicht existiert. Hast du IPs in deiner .htaccess geblockt?
Ansonsten würd ich mal den Quelltext überarbeiten, manchmal reagieren die Bots allergisch auf nicht geschlossene Tags.

also ich finde keine .htaccess datei, kläre es aber zur zeit noch ab beim provider oder ich diese ev. nicht sehen kann.

ich kann mir einfach nicht vorstellen, dass die seite zuerst indexiert wurde und fast zeitgleich von allen sumas eleminiert wird.

[marc75]

schau doch in die Logdateien ob die bots da waren.

[x-plosiv]

Nimm zu deinen Erkenntnissen noch den Wegfall des Newbie-Bonus dazu. Reicht es dann nicht für einen Kick?? Ich finde schon!

ich finde einfach komisch, dass ich gleichzeitig bei msn und google ausgeschlossen werden. ebenfalls sagt mir ja google sitemap er könne die seite nicht erreichen (sofern ich mich auf diese meldung verlassen kann)

Sendet diese tool einen UA? Wenn nein kann es sein, dass es deswegen ausgesperrt wird. Die SUMAS sind wohl nicht geblockt, sonst wäre die site erst gar nicht in den Index gekommen.

das weiss ich leider nicht.

Bei Yahoo sind viele Seiten mit session-ids zu finden!
Also lies dir erst mal die Grundlagen durch und mach deine Hausaufgaben bevor du über das Verhalten der SUMAS jammerst.
Und wie bereits angesprochen: Der Validator kotzt. Hier kannste gleich weiter machen, auch wenns mit deinem Problem nichts zu tun hat.

ich will ja nicht jammern, ich bin mir dieser fehler absolut bewusst. dies ist auch nicht das erste projekt welches ich übernommen habe. nur so schlimm war es noch nie.

was ich bis jetzt nicht erwähnte, der kunde hat vor gut einem monat eine neue versions des shops hochgeladen. es änderte sich aber an der strucktur etc. nichts. darum habe ich untern anderem die vermutung, dass es jetzt plötzlich die sumas ausgeschlossen hat, denn er war ja im index, wenn auch nicht gut positioniert (was ja auch verständlich ist)

[shapeshifter]

Grundsätzlich:

Ist eine Seite verlinkt und erreichbar - wird sie indiziert.

Sie bleibt indiziert bis:

- sie nicht mehr vorhanden ist
- sie nicht mehr erreichbar ist
- sie manuell aus dem Index entfernt wird (wenn man Unsinn treibt)

Das wars auch schon an Gründen, die für eine Veränderung in Frage kommen können.

Da der Validator aber wohl nicht so einverstanden mit deiner Dokumentenstruktur ist - könnte es aber vielleicht auch sein, dass sie gar nicht mahr als HTML-Dokumente durchgehen !

Such doch mal nach deinen Seiten mit dem Zusatz : "filetype:unknown"

[luigip]

Sendet diese tool einen UA? Wenn nein kann es sein, dass es deswegen ausgesperrt wird. Die SUMAS sind wohl nicht geblockt, sonst wäre die site erst gar nicht in den Index gekommen.

das weiss ich leider nicht.

Die log-files sind dein Freund. Dort siehst du es. Genauso wie du dort siehst, welchen statuscode die bots bekommen: 200, 403,404 etc.

also ich finde keine .htaccess datei, kläre es aber zur zeit noch ab beim provider oder ich diese ev. nicht sehen kann.

Die .htaccess wird von manchen ftp-Programm in der Standardeinstellung nicht angezeigt.

[x-plosiv]

schau doch in die Logdateien ob die bots da waren.

nein der kommt eben auch nicht mehr