Seite 1 von 1
Google ignoriert robots.txt
Verfasst: 31.05.2006, 17:05
von Thomas B
Hallo, wie schon am Titel zu erkennen ist, habe ich ein Problem mit der Robots.txt.
Seiten die letzte Woche onlinegestellt wurden ( im Ordner "Vorlagen" ), sind indexiert und tauschen unter der site Abfrage auf. Hat jemand die gleichen Erfahrungen gemacht?
Gruß
Verfasst:
von
Hochwertiger Linkaufbau bei ABAKUS:
- Google-konformer Linkaufbau
- nachhaltiges Ranking
- Linkbuilding Angebote zu fairen Preisen
- internationale Backlinks
Wir bieten
Beratung und
Umsetzung.
Jetzt anfragen:
0511 / 300325-0
Verfasst: 31.05.2006, 17:27
von Martin Ice
Hallo Thomas B,
das ist normal für google. Die robots.txt Datei wird nicht jeden Tag runtergeladen bzw. nicht direkt aktualisiert. Vielmehr dauert es bis zu einer Woche bis die aktuellen Einstellungen übernommen werden. Hinzu kommt, das google mittlerweile mit der "super neuen" Cache-Spider Technologie arbeitet und da kommt es nochmals zu Verzögerungen bis alle Bots die neue Version Deiner Robots.txt haben.
Re: Google ignoriert robots.txt
Verfasst: 01.06.2006, 06:36
von Hasenhuf
Thomas B hat geschrieben:...sind indexiert und tauschen unter der site Abfrage auf.
Mit beschreibendem Text oder nur der Link? Letzteres ist normal so.
Verfasst: 01.06.2006, 08:34
von Thomas B
Nur die Links. Habe ich aber vorher bei anderen Seiten noch nie bewußt bemerkt.
Verfasst: 01.06.2006, 09:19
von Cayman
Lösch die Seiten mit der urlconsole und die Links sind raus aus den Serps.
