Code: Alles auswählen
User-agent: Googlebot
Disallow: /*?
User-agent: *
Disallow: /forum/cache/
Disallow: /forum/db/
Disallow: /forum/docs/
Disallow: /forum/images/
etc.
Ich habe das schon öfter geschrieben, da ich es am eigenen Leib "erfahren" musste, bis mir die Ursache klar war. Leider ist der Thread auf phpBB dahingehend nicht korrekt.
Also: Entweder:
Code: Alles auswählen
User-agent: *
Disallow: /*?
Disallow: /forum/cache/
Disallow: /forum/db/
Disallow: /forum/docs/
Disallow: /forum/images/
etc.
Code: Alles auswählen
User-agent: Googlebot
Disallow: /*?
Disallow: /forum/cache/
Disallow: /forum/db/
Disallow: /forum/docs/
Disallow: /forum/images/
etc.
User-agent: *
Disallow: /forum/cache/
Disallow: /forum/db/
Disallow: /forum/docs/
Disallow: /forum/images/
etc.