Googlebot läuft Amok
Verfasst: 16.11.2005, 16:27
Auf unserer Webseite habe ich ein einsprachiges englisches Wörterbuch eingebaut, welches in den Definitionen auch auf andere Begriffe intern verlinkt. Damit Google und Co. dadurch nicht endlos alle Begriffe durchsuchen, hatte ich bisher ein
eingebaut. Heute scheint der Googlebot das aber zu ignorieren und hat schon über 12.000 Begriffe durchsucht. Um das zu stoppen, habe ich jetzt
eingebaut und alle Links noch mit rel="nofollow" versehen. Aber auch das scheint den Googlebot nicht zu stören und er sucht munter weiter.
Hat das noch jemand beobachtet oder kann mir einer erklären, warum der Googlebot auf einmal so durchdreht?
Alle Zugriffe kommen von der 66.249.72.51
Code: Alles auswählen
<meta name="robots" content="nofollow" />
Code: Alles auswählen
<meta name="robots" content="noindex,nofollow" />
Hat das noch jemand beobachtet oder kann mir einer erklären, warum der Googlebot auf einmal so durchdreht?
Alle Zugriffe kommen von der 66.249.72.51