Links/URLs in meinem neuen Webkatalog checken

[branchenbaer]

Hallo,
ich baue gerade einen neuen Webkatalog mit gut 3 Millionen gecrawlten URLs auf. Bevor ich diesen Katalog online stelle, suche ich nach einer Möglichkeit, die vorhandenen URLs gegen zu checken auf bekannte phishing-Seiten, Sex-Seiten etc.
Gibt es eine Möglichkeit, eine Liste dieser bekannten Seiten mit meinen URLs abzugleichen oder eine Liste mit Keywords nach denen gewisse URLs ausgeschlossen werden können ?

LG, Uli.

[Malte Landwehr]

Du könntest alle URLs mit der Safe Browsing API von Google prüfen. Der wird Phishing-Seiten raus schmeißen.