plane jetzt mit Sitemap's zu arbeiten und die den 4 Apokalyptischen Spidern (Google, Yahoo, MSN, ASK) bekannt zu machen - das sollte ja wohl langen, oder?
Hallo, nehmen wir mal an eine Site ist mit einem CMS geschlagen welches alle Seite/Links über eine ID addressiert: https://www.<name>.de/<dir>/<seiten>?cid=f6928cc073e9a3bf72648218d8f6d62f Die Seiten können diese ID auch bei einem "Erzeugungslauf" ändern. Google spiedert so was ja wohl nic...
www.netcraft.com und dann "Whats that site running?" Liefert folgenden Output: OS, Web Server and Hosting History for www.abakus-internet-marketing.de https://www.abakus-internet-marketing.de was running Apache on Linux when last queried at 31-Jan-2008 10:50:19 GMT - refresh now Site Repor...
Möchte eine URL angeben undfür's erste die URLs auf dieser Seite extrahieren - weiterer Schritt Links auf der gleichen Site folgen und dann auch dort Links extrahieren.
Links als TX, CSV, ... würde mir für den Anfang reichen (Futter für einen Spider )
Nur mal ne Idee - melde Deine Idee mal an ein Magazin (z.B. c't) und lass die mal stöbern - wenn die das machen währe das "zensur" (aber Du gehörst ja zur Achse des Bösen) - hast Du eine sitemap.xml? Wie liegst Du bei anderen SUMAs?