Ich hab heut auf meiner Seite einen recht ungewöhnlichen Besuch gehabt:
Mozilla/5.0 (compatible; jobs.de-Robot +https://www.jobs.de)
Wenn ich die Idee weiter spinne, erkundet der Crawler das gesamte INet und sucht nach dem Wort Jobs/Stelllenangebote oder ähnlichem. Hat er was gefunden wird das ganze aufgenommen, der Region zugeteilt und das Ergebnis kann man sich auf jobs.de anzeigen lassen.
Keine schlechte Idee!
Aber wie trennt man die Spreu vom Weizen?
Lasst uns doch mal drüber philosophieren
