Googlebot läuft Amok

Beitrag von **Babelfisch** » 16.11.2005, 16:27

Auf unserer Webseite habe ich ein einsprachiges englisches Wörterbuch eingebaut, welches in den Definitionen auch auf andere Begriffe intern verlinkt. Damit Google und Co. dadurch nicht endlos alle Begriffe durchsuchen, hatte ich bisher ein

Code: Alles auswählen

<meta name="robots" content="nofollow" />

eingebaut. Heute scheint der Googlebot das aber zu ignorieren und hat schon über 12.000 Begriffe durchsucht. Um das zu stoppen, habe ich jetzt

Code: Alles auswählen

<meta name="robots" content="noindex,nofollow" />

eingebaut und alle Links noch mit rel="nofollow" versehen. Aber auch das scheint den Googlebot nicht zu stören und er sucht munter weiter.

Hat das noch jemand beobachtet oder kann mir einer erklären, warum der Googlebot auf einmal so durchdreht?

Alle Zugriffe kommen von der 66.249.72.51

von **Anzeige von ABAKUS** »

Beitrag von **Cbn5** » 16.11.2005, 16:31

Hallo,

ich kann dir zwar nicht sagen woran das liegt, aber auch bei mir ignoriert der GoogleBot sämtliche noindex- und nofollow-Anweisungen. Noch besser: Plötzlich tauchen alle gesperrten Seiten auch im Index auf. Zwar ohne Beschreibung etc., aber die reinen Links sind trotzdem alle im Index.

Beitrag von **Red Bull** » 16.11.2005, 16:50

Plötzlich tauchen alle gesperrten Seiten auch im Index auf.

Bei mir auch

Hab die Seiten auf die schnelle mit einem Paßwortschutz versehen.

von **Anzeige von ABAKUS** »

Content Erstellung von ABAKUS Internet Marketing
Ihre Vorteile:

einzigartige Texte
suchmaschinenoptimierte Inhalte
eine sinnvolle Content-Strategie
Beratung und Umsetzung

Jetzt anfragen: 0511 / 300325-0

Beitrag von **blinks** » 16.11.2005, 16:50

Cbn5 hat geschrieben:Plötzlich tauchen alle gesperrten Seiten auch im Index auf. Zwar ohne Beschreibung etc., aber die reinen Links sind trotzdem alle im Index.

dito

bei mir werden die robots.txt's plötzlich ignoriert und 'dissallowed' seiten sind im index...

Beitrag von **merkelbuster** » 16.11.2005, 17:12

Jep, der Wahnsinn. Bleibt zu hoffen, dass meine Print-Versionen nicht als DC bestraft werdem.

Beitrag von **Babelfisch** » 16.11.2005, 19:13

merkelbuster hat geschrieben:Jep, der Wahnsinn.

Heute läuft bei Google wohl irgendwie alles schief. Gerade sehe ich, dass der der Bot auch URLs im Shop mit einer Session-ID erwischt hat. Wenn der Googlebot mit seiner Kennung vorbeikommt, wird aber gar keine Session gestartet und keine Session-ID an die Links angehangen. Solche Links können also eigentlich gar nicht in den Index kommen.

Verstehe das wer will.

Beitrag von **bydlo** » 16.11.2005, 19:18

Babelfisch hat geschrieben:

Verstehe das wer will.

wir sollten mal ne sammlung anlegen.
"googles gestammelte werke"

hier gibts noch was unverständliches
https://www.abakus-internet-marketing.d ... 20470.html

Beitrag von **Hobby-SEO** » 16.11.2005, 21:07

Ich habe auch etwas Lustiges:

Von mir sind seit vielleicht zwei, drei Wochen wieder Seiten im Index, die es seit Monaten nicht mehr gibt und die ich auch über das Removal-Tool gelöscht hatte.
Das Erstaunliche ist, dass diese nicht mehr existierenden Seiten mit Description im Index sind und auch schon Google-User auf meine Website geführt haben - wenn auch nur auf meine 404er-Seite...

LG, Hobby-SEO

Beitrag von **Chris2005** » 16.11.2005, 21:21

Kann ich bestaetigen...

Mit URL Console geloeschte Dateien sind wieder im Index und lassen sich auch nicht wieder entfernen. Da meckert die Console, dass der Auftrag bereits bearbeitet wird.

Beitrag von **Fridaynite** » 16.11.2005, 21:38

Wirrer Datensalat, der als Jagger 1- 3 von Matt Cutts verkauft wird.
Und Brett Tabke spielt da auch noch mit. Irgendwo fehlt mir die Linie eines Updates. Die Googleserver haben ein Eigenleben entwickelt und machen nimmer das, was die Programmierer wollten.

Beitrag von **MonikaTS** » 16.11.2005, 22:31

zur Zeit habe ich soviele Error 404 aufrufe, dass es zum Verzweifeln ist,

eben weil Google alle uralten Sites hervorhlot.

ich bin mehr als heilfroh, wenigst eine individuelle 404 anbieten zu können.

wird Zeit, wenn Google endlich wieder *normal* wird.

lG

Beitrag von **Babelfisch** » 16.11.2005, 23:36

Dazu kommt, dass Google immer noch munter 301er Umleitungen ignoriert. Das war zwar schon lange vor Jagger so, nervt aber gewaltig.

Beitrag von **Hobby-SEO** » 17.11.2005, 00:14

@Babelfisch:

Besser ganz ignorieren als Inhalte falschen Websites zuzuordnen, wie es bei den 302-Weiterleitungen der Fall war... oder vielleicht immer noch ist.

Kennt noch jemand ein paar nette Google-"Features"?

LG, Hobby-SEO

Beitrag von **Margin** » 17.11.2005, 09:06

Jep, noch ein neues "G00gle-Feature"

Hab auf einer Unterseite einen Outbound-Link,
der nicht verfolgt werden soll.
Nach diversem Schubsen hatte ich die Nase voll und
hab die komplette Seite nun auf:
index / nofollow

G00gle macht (immer noch) das Gegenteil:
follow / noindex

Margin

Beitrag von **schaf** » 19.11.2005, 07:16

Babelfisch hat geschrieben:
merkelbuster hat geschrieben:Jep, der Wahnsinn.
Gerade sehe ich, dass der der Bot auch URLs im Shop mit einer Session-ID erwischt hat. Wenn der Googlebot mit seiner Kennung vorbeikommt, wird aber gar keine Session gestartet und keine Session-ID an die Links angehangen.

hab ich bei mir auch gerade entdeckt...
...nur mit dem unterschied, daß bei mir generell keine sessions gestartet werden