Seite 1 von 1

index.php auf index.html umgewandelt...

Verfasst: 27.02.2004, 11:44
von slinky
Moin zusammen,

hatte bis vor einiger Zeit im Root-Verzeichnis ne index.php, die dann auch mit verschiedenen Parametern bei google registriert war.

So nach dem Motto: www.domain.de/index.php/verzeichnis/verzeichnis/

Habe jetzt aber seit einiger Zeit als Startseite index.html.

Obwohl ich per robots.txt inzwischen alle Varianten wie:

User-agent: *
Disallow: index.php
Disallow: /index.php/
Disallow: /index.php/verzeichnis/

ausprobiert habe, versucht dieser komische Googlebot immer noch, die indizierten Seiten zu spidern, und kriegt dann jeweils die Fehlermeldung "300 - Multiple Choices" mit Verweis auf die index.html. :evil:

Problem ist natürlich, dass der Googlebot darauf soviel Zeit verschwendet, und viel zu wenig die neuen Seiten spidern kann.

Weiss jemand Rat? :cry:

Gruß

slinky

Verfasst:
von

Verfasst: 27.02.2004, 13:12
von bugscout
moin moin,

https://services.google.com:8882/urlcon ... tcmd=login

konto anmelden und dann

Löschen Sie Seiten, Unterverzeichnisse oder Bilder mithilfe einer robots.txt-Datei.

www.deine-domain.de/robots.txt rein

und dann hau weg und morgen ist alles in butter.

grüsse

Verfasst: 27.02.2004, 13:52
von slinky
Hi bugscout,

die Variante hatte ich auch schon probiert.

Leider meldet sich dann Google immer mit:

Der Webserver bietet zwar eine Weiterleitung, aber keine endgültige Zielsite. Die HTTP-Kopfzeile "Location:" fehlt.

Verfasst: 27.02.2004, 14:49
von bugscout
moin moin,

würde mal die index.php auf den server legen
und besagte verzeichnisse anlegen.

grüsse

Verfasst: 27.02.2004, 15:27
von slinky
Und was soll das bitteschön bringen????

Ich will doch eben nicht, dass sich der DeepCrawler immer noch mit den nicht mehr vorhandenen Seiten beschäftigt. Er soll doch die neue Sitestruktur spidern.

gruß zurück.

Verfasst: 27.02.2004, 15:31
von bugscout
moin moin,

dein server scheint so eingerichtet zu sein, dass er bei 404
etwas anbietet wie "meinten sie index.html".

wenn die sache morgen erledigt ist, kannst du es ja wieder löschen.

grüsse