frage zum google spider

Beitrag von **DiveSurfer** » 24.04.2006, 08:01

ich hätte mal eine kleine frage zum google spieder, der kommt ja regelmässig vorbei und schaut sich auch die robors.txt an, werde etwailige änderungen "sofort" übernommen oder dauert das eine weil (bsp. monat)?

danke für die antworten

von **Anzeige von ABAKUS** »

Beitrag von **Windy** » 24.04.2006, 11:36

Änderungen werden bei neuen Crawl berücksichtigt. Schon im Index vorhandene Seiten werden davon nicht beeinflusst.

Beitrag von **DiveSurfer** » 24.04.2006, 12:25

achso wenn ich aber sage:
User-agent: *
Disallow: /

was geschieht dann mit den seiten die schon im index sind und vorallem wie bekomm ich die dann da raus?

Beitrag von **thetrasher** » 24.04.2006, 13:56

DiveSurfer hat geschrieben:achso wenn ich aber sage:
User-agent: *
Disallow: /

was geschieht dann mit den seiten die schon im index sind und vorallem wie bekomm ich die dann da raus?

https://www.google.com/intl/de/webmasters/remove.html hat geschrieben:Um Ihre Website aus Suchmaschinen zu entfernen und alle Robots daran zu hindern, sie künftig zu durchlaufen, platzieren Sie die folgende robots.txt-Datei in das Stammverzeichnis Ihres Servers:
User-agent: *
Disallow: /

Entfernen = Entfernen aus dem angezeigten Index

Auch nach einer schnellen Löschung via URL-Console unterdrückt Google lediglich die Anzeige. Was hilft sind die Fehlerkodes 410 (HTTP/1.1) bzw. 404 (HTTP/1.0) für jede der aus dem Index zu löschenden Seiten. Cloaking!

Beitrag von **DiveSurfer** » 24.04.2006, 13:59

aha ok vielen dank