also ich hab auch schon einmal einen robot gebaut... gekursiv versteht sich. ist aus langeweile entstanden.
ich musste schnell erkennen, dass was Michael schon erwähnte: ein bot schafft wenig. also alles multitasking auf unix ebene. funzte alles wunderbar, bis auf zwei wesentliche faktoren, auf die ich auf grund fehlender finanzmittel (schüler) keinen einfluss hatte/hab:
einmal die anbindung des servers. du musst eine sau-geile anbindung haben, sonst macht das kein spass. auch nutzt dir ein root server wenig. so hundert davon wär schon einmal ein anfang...
zweitens die datenbank. ich kannte/kenne mich nur mit mySql aus. damit ist bei 8 gb schluss... die waren schnell erreicht.
grob überschlagen bräuchte man für googles datenbestand über 50 Terabyte. gut, man kanns vielleicht noch komprimieren aber trotzdem ....
also wenn jemand interesse hat und ein paar euronen zu viel hat, kann sich gerne bei mir melden
gruss
grasi