Liste mit URLs (TLD etc)

Beitrag von **3DCG** » 30.10.2007, 21:10

Hallo,

für eine Studie eine Liste von URLs (crawler) - kann mir jemand gute Quellen empfehlen?

DANKE

.

von **Anzeige von ABAKUS** »

Beitrag von **saudepp** » 30.10.2007, 21:25

guggstu: www.google.de

voll die liste mit URRRRL Mann

Beitrag von **xxlfeuerwalze** » 30.10.2007, 22:02

von **Anzeige von ABAKUS** »

Beitrag von **3DCG** » 01.11.2007, 15:30

Ich wollte nicht suchen sondern wollte Listen mit URLs

DANKE

.

Beitrag von **xxlfeuerwalze** » 01.11.2007, 15:51

Wie viele sollen es sein?

Beitrag von **3DCG** » 05.11.2007, 22:41

xxlfeuerwalze hat geschrieben:Wie viele sollen es sein?

was hast Du bzw. wie viele?

Alle .com, .net und .org bzw. .edu würde für den Anfang langen

Die .de würde ich aber auch nehmen

Per Download?

DANKE

.

Beitrag von **swiat** » 05.11.2007, 23:16

Beitrag von **xxlfeuerwalze** » 06.11.2007, 00:08

Also, Du meinst eine Excel-Tabelle mit allen URL´s ? Und was soll das bringen?

Beitrag von **Anonymous** » 06.11.2007, 00:36

jungs es geht um die crawler...
3DCG mach einfach mal eine richtige anfrage draus und sei nicht so schreibfaul..

Beitrag von **3DCG** » 25.12.2007, 22:53

swiat hat geschrieben:Hier für .de

https://www.google.de/search?hl=de&safe ... uche&meta=

Google liefert nur max 1000 Resultate zurück auch wenn Millionen angegeben werden. Leider gibt es die alte Google API nicht mehr

zuendschnur hat geschrieben: 3DCG mach einfach mal eine richtige anfrage draus und sei nicht so schreibfaul..

Wie meinst Du das? Testen möchte ich einen eigenen Spider / Crawler und dafür brauche ich eine Menge URLs zum testen.

.

Beitrag von **Zerstreuter** » 25.12.2007, 23:33