ABAKUS

Hallo ,

wo kann man Listen von (TLD) URLs / Domains bekommen / downloaden? Als Startpunkt für ein Crawler Experiment.


DANKE


.

Man kann bei Dmoz einen Export mit allen eingetragenen URLs herunterladen.
Das ist meist eine ganz gute Basis für erste Schritte im Bereich Suchindexe.

Bei Interesse an einer Kooperation: Wir bieten mit QualiGO einen Gratis-Index an mit dem man auch zusätzlich über Sponsored Links Geld verdienen kann.

Da kann ich auch einen export aus der Wikipedia nehmen - mir geht es um die TLDs direkt nicht irgendwelche Links.

.net / .com / .org (evtl. .edu) soll man ja bekommen können (hat die jemand?)

.de und viele andere zicken mächtig rum. die datenbank von netcraft wäre nett


,