Webkatalogliste als txt

Beitrag von **Rdata** » 17.07.2007, 18:58

Hi Forum,

Gibts ne Möglichkeit zum einen aus einer Webseite schnelle alle linkurl herauszukopieren um so eine url liste aller möglichen Webkataloge zu extrahieren?

Oder gibts so ne liste schon? (txt,csv,xls)

Grüße Rdata

von **Anzeige von ABAKUS** »

Beitrag von **semtex** » 17.07.2007, 23:23

Sollte kein Problem sein, ein kleiner fünfzeiler in PHP und das Ding ist gegessen !
Mit "file_get_contents" holst Du Dir den Content rein und mit "preg_match" extrahierst Du die Urls.

Code: Alles auswählen


  $content = file_get_contents&#40;"http&#58;//www.domain.de"&#41;;
  preg_match_all&#40;"!<a.*?href=\"&#40;&#91;^\"&#93;*&#41;\"&#91;^>&#93;*>&#40;.*?&#41;</a>!",$content,$gogo&#41;;

  foreach &#40;$gogo&#91;2&#93; as $domain&#41;
  &#123;
    echo $domain.'<br>';
  &#125;

Das kann man natürlich noch weiter ausbauen, zb. mit einem Formular und das Dir die Urls in eine Datei geschrieben werden.
Wenn man ganz Pfiffig ist, kann man sich einen kleinen Spider bauen der die Links weiterverfolgt und sich dort weiter durch alle Seiten crawlt.

Beitrag von **Advertiseman** » 18.07.2007, 01:25

Ich habe vor längerem einmal etwas programmiert um aus Google (per Api) Webkatalog zu lesen und in einer Liste zu speichern. Ist allerdings ein etwas komplexeres Script.

Auf Anfrage lasse ich gerne eine Liste über einige hundert Webkataloge erstellen (kostenlos).

Nur erstelle ich keine große Liste wegen einer Person.

von **Anzeige von ABAKUS** »

Content Erstellung von ABAKUS Internet Marketing
Ihre Vorteile:

einzigartige Texte
suchmaschinenoptimierte Inhalte
eine sinnvolle Content-Strategie
Beratung und Umsetzung

Jetzt anfragen: 0511 / 300325-0

Beitrag von **suchus** » 18.07.2007, 01:32

Naja wenn Du eh so nett bist und das kostenlos machen willst ist es doch egal ob es einer oder tausend nehmen

Beitrag von **Advertiseman** » 18.07.2007, 01:54

Sind ja nur ein paar Klicks, die ich in mein Programm eingeben muss.
Ich stelle einfach mal die Liste bis heute Abend zusammen und veröffentliche sie dann hier.

Beitrag von **Rdata** » 18.07.2007, 07:07

Super das ist klasse! Dann bis heute abend!

Beitrag von **propaganda** » 18.07.2007, 07:45

Rdata hat geschrieben:
Gibts ne Möglichkeit zum einen aus einer Webseite schnelle alle linkurl herauszukopieren

Ja, mit meiner Firefox Erweiterung.

Beitrag von MW » 18.07.2007, 09:16

@ Advertiseman:

ich wäre auch interessiert an der Liste. Danke für deine Mühen vorab!

Beitrag von **muskelbody** » 18.07.2007, 12:53

ich haette auch gern eine

Beitrag von **semtex** » 18.07.2007, 13:04

Das grenzt ja schon langsam an Contengrabbing

Ich glaube kaum, das die Besitzer der Linklisten von Ihrem Glück wissen das ihre Seiten gescannt und die Weblinks aufbereitet wurden.

Beitrag von **firewire** » 18.07.2007, 13:12

deutsche oder englische Webkataloge?

Beitrag von **Rdata** » 18.07.2007, 14:14

Das grenzt ja schon langsam an Contengrabbing
Ich glaube kaum, das die Besitzer der Linklisten von Ihrem Glück wissen das ihre Seiten gescannt und die Weblinks aufbereitet wurden.

Wie soll ich das verstehen? Diese Liste benötige ich als eintragungs hilfe... finde es praktische mal so eine zu haben.

@firewire

Ich kann Sie gut in beiden Sprachen benötigen.

Beitrag von **semtex** » 18.07.2007, 14:52

Rdata hat geschrieben:
Das grenzt ja schon langsam an Contengrabbing
Ich glaube kaum, das die Besitzer der Linklisten von Ihrem Glück wissen das ihre Seiten gescannt und die Weblinks aufbereitet wurden.
Wie soll ich das verstehen? Diese Liste benötige ich als eintragungs hilfe... finde es praktische mal so eine zu haben.

@firewire

Ich kann Sie gut in beiden Sprachen benötigen.

Dich meine ich im Grunde nicht !

Ich finde es bloss immer etwas merkwürdig, wenn Leute hier gross aufschreien wenn nur mal ein unbekannter Bot ihre Seite besucht, es aber für normal finden mit extra dafür entwickelten Scripten von fremden Seiten Content für Ihre Zwecke zu extrahieren.

Beitrag von **Rdata** » 18.07.2007, 16:22

Stimmt schon! Aber dies nützt ja jedem der seine seite in webkataloge einträt oder?

Also dann warten wir mal bis die ganze liste hier gepostet wird!

Beitrag von **semtex** » 18.07.2007, 16:42

Jede Medaille hat aber zwei Seiten

Regt euch dann bitte aber auch nicht auf, wenn mal jemand auf eure Seite kommt und euren Content für seine Zwecke missbraucht, eventuell alle Kunden eurer Referenzliste mit seiner Werbung anschreibt.

Ich bin auch nicht gerade ein Kind von Traurigkeit und ich will natürlich auch niemanden unterstellen das er mit den Listen was böses anfangen möchte, nur es muss hier nicht noch ein offizieller Tauschhandel damit erblühen.

Trotzdem möchte ich die Liste natürlich auch gerne haben Bild