Code: Alles auswählen
User-agent: *
Disallow: forum/memberlist.php
...
hält sich google gar nicht an die robots.txt ?
Herzlich willkommen im Archiv vom ABAKUS Online Marketing Forum
Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.
Code: Alles auswählen
User-agent: *
Disallow: forum/memberlist.php
...
Code: Alles auswählen
Disallow: /forum/memberlist.php
Man kann die robots.txt auch einsetzen, wenn man nix auszuschließen hat, z.b. um aggressive msnbots zu zügeln.Nadia hat geschrieben:Braucht ihr eigentlich noch die robots, wenn ihr nichts auszuschliessen habt?