Crawler-Software zum Extrahieren von Links gesucht

Beitrag von **peterpeter** » 10.03.2009, 16:04

Moin zusammen,

ich suche ein Tool, das mir Links aus einem Webauftritt per Crawling-Verfahren ausliest und in einer Liste abspeichert (wichtig ist natürlich die Information auf welcher Seite der Link gefunden wurde).

Es gibt zwar jede Menge Online-Tools, die jedoch nur einzelne Dokumente auslesen (und eben nicht den gesamten Auftritt).

Open-Source oder Freeware wären optimal, jedoch darf die Software zur Not auch was kosten.

Viele Grüße
Pit

von **Anzeige von ABAKUS** »

Beitrag von **JohnBi** » 10.03.2009, 16:06

automatisch kenn ich kein Tool aber ich empfehle dir

Xenu Linksleuth - das findet alle externen Links und sagt dir auch auf welcher Seite sich diese befinden .. echt super nützlich und freeware.

JohnBi

Beitrag von **bennos** » 10.03.2009, 16:07

Schau mal in die aktuelle CT. da wird in einem artikel der programmierung eine suchmaschine per php beschrieben.

etwas umbauen und die extrahierst alle links.

von **Anzeige von ABAKUS** »

Hochwertiger Linkaufbau bei ABAKUS:

Google-konformer Linkaufbau
nachhaltiges Ranking
Linkbuilding Angebote zu fairen Preisen
internationale Backlinks

Wir bieten Beratung und Umsetzung.
Jetzt anfragen: 0511 / 300325-0

Beitrag von **peterpeter** » 10.03.2009, 16:51

JohnBi hat geschrieben:automatisch kenn ich kein Tool aber ich empfehle dir

Xenu Linksleuth - das findet alle externen Links und sagt dir auch auf welcher Seite sich diese befinden .. echt super nützlich und freeware.

JohnBi

Hallo und vielen Dank. Also ich bin erstaunt wie schnell die Software arbeitet.
Aber sie listet doch nur URLs auf und zeigt nicht an, wo sie sich die Links befinden. Oder muss ich da noch irgendwas einstellen?

Beitrag von **JohnBi** » 10.03.2009, 16:57

doch - da kannst du mit rechter Maustaste anzeigen lassen auf welcher Seite die sich befinden ...

rechte Maustaste auf den Eintrag und dann auf

Properties und dann unten steht

Pages linking to this one:

und dann stehen se alle da

Beitrag von **peterpeter** » 10.03.2009, 17:10

Vielen Dank, gerade gesehen.

Klasse das Tool !!!

Beitrag von **rayman2000** » 10.03.2009, 18:44

Ich hab ne frage die nur annähernd damit zu tun hat. Wollte jetzt aber keinen extra thread aufmachen.

Gibts ein tool was meine Dateien, online oder offline, nach einem bestimmten Code durchsucht (bsp. <a href="link.htm">link</a>" diesen in allen Seiten ändert und die Dateien wieder abspeichert?

Mein Notepad++ kann sowas. Da müssen aber alle Dateinen geöffnet werden.
Das geht auch, machts aber bissle schwieriger.

Beitrag von **pagan** » 10.03.2009, 18:55

phpDesigner kann das zum Beispiel. Dort kann man einen ganzen Ordner mit oder ohne Unterordner auswählen in dem die Änderungen vorgenommen werden sollen.

Beitrag von **JohnBi** » 10.03.2009, 19:29

ich nutze für solche Sachen Phase5 HTML Editor nennt sich Dateiübergreifendes Suchen und Ersetzen ...

Beitrag von **catcat** » 10.03.2009, 19:53

Dreamweaver kann dat auch^^