Google missachtet meine robots.txt
Verfasst: 11.04.2007, 08:28
Hi!
Für die Domain www.greysanatomyforum.de hab ich eine robots.txt angelegt:
User-agent: *
Disallow: /acp/
...
Disallow: /memberslist.php
Disallow: /thread.php
...
Nun seh ich aber in der Wer ist Wo online ansicht, dass Google sich in einem Thema befindet ( thread.php?id=123 )
Aber die thread.php ist ja gesperrt.
Vor dieser robots.txt hatte ich die Dateien Ohne führendes / dort drin stehn, aber auch da hat Google alles gezogen.
Es gibt auch kein Verzeichnisproblem, da alles im Root liegt.
Habt ihr eine Idee?
Mfg Ricken
Für die Domain www.greysanatomyforum.de hab ich eine robots.txt angelegt:
User-agent: *
Disallow: /acp/
...
Disallow: /memberslist.php
Disallow: /thread.php
...
Nun seh ich aber in der Wer ist Wo online ansicht, dass Google sich in einem Thema befindet ( thread.php?id=123 )
Aber die thread.php ist ja gesperrt.
Vor dieser robots.txt hatte ich die Dateien Ohne führendes / dort drin stehn, aber auch da hat Google alles gezogen.
Es gibt auch kein Verzeichnisproblem, da alles im Root liegt.
Habt ihr eine Idee?
Mfg Ricken