1. robots.txt und Pagerank haben absolut nichts miteinander zu tun. Gute und viele Backlinks, eine gute interne Verlinkung, Content und eine sitemap sind wichtig. In den Grundlagen von Alan steht hierzu viel.
2. Die guten Sumas halten sich an die robots, die bösen nicht. Die bösen kannst du nur in der htaccess aussperrren, wenn du sie kennst. Gibt hier im Forum einige htaccess Beispiele von Mitgliedern.
3. Schau mal nach bot trap.