SEOkicks Backlinkcheck mit eigener Datenbasis

Beitrag von **SEOkicks** » 09.02.2012, 11:23

Das ist schon jetzt so und übrigens auch ein häufiger Abfragefehler (hier müssen wir noch an der Usability arbeiten): Nur wenn Du Abfragen ohne jede Subdomain laufen lässt (z.B. spiegel.de) bekommst Du die Backlinkdaten inkl. Links auf Subdomains, ansonsten beziehen sie die Daten immer auf die eingegebene Subdomain. Bei Abfrage der Daten von www.spiegel.de werden also nur Links berücksichtigt, die auf die Subdomain www.spiegel.de zeigen.

Falls Du nur Links betrachten möchtest die auf die Hauptdomain ohne jede Subdomain zeigen, dann hänge einfach ein $ an den Domainnamen, also z.B. "spiegel.de$". Ist bisher noch nicht dokumentiert, funktioniert aber trotzdem

von **Anzeige von ABAKUS** »

Beitrag von **SEOAgentur** » 13.02.2012, 15:16

Mhm, irgendwie hab ich den Eindruck, dass seit einiger Zeit weniger BL-Daten bei euch drin sind... trotz eurer Zusicherung, dauernd zu erweitern...

Beitrag von **SEOkicks** » 17.02.2012, 10:50

In Summe täuscht der Eindruck, derzeit haben wir mit über 10 Mrd. Daten den größten Index seit GoingLive unserer Seite. Allerdings fügen wir nicht nur neue Linkdaten hinzu, sondern löschen auch die nicht mehr gefundenen Backlinks aus dem Bestand, so dass es bei einzelnen Seiten dennoch eine Reduzierung der Anzahl gefundener Links geben kann.

Es kann aber auch noch eine zweite Ursache für einen Rückgang geben: Aufgrund unserer begrenzten Hardware-Ressourcen müssen wir sehr genau prüfen, welche Domains wir wie tief crawlen um dort nach Verlinkungen zu suchen. Dieser Algorithmus wurde und wird derzeit noch laufend angepasst und optimiert. Es kann daher sein, dass aufgrund einer geänderten Crawling-Strategie bestimmte Links plötzlich nicht mehr gefunden werden, die zuvor noch gefunden wurden (im Gegenzug werden dafür andere Links gefunden die unser Algorithmus als wichtiger betrachtet).

Die gute Nachricht: Wir haben diese Woche die Anzahl unserer Crawler verdoppelt und können ab sofort deutlich mehr Websites berücksichtigen als zuvor. Das nächste große Datenbankupdate wird daher vermutlich bei nahezu allen Domains zu einem Sprung nach oben führen. Gleichzeitig wird es unter https://www.seokicks.de einige neue Auswertungsmöglichkeiten geben (sofern die abschließenden Tests alle positiv verlaufen).

von **Anzeige von ABAKUS** »

Beitrag von **ThatsLife** » 17.02.2012, 12:02

Die Sache brennt mir schon eine weile unter den Fingern. Warum versucht man nicht mal eine Crowd Lösung? Viele Leute scannen nach seti vorbild und wer mit scannt bekommt Zugriff auf die Daten. Ein erster Anlaufpunkt kann das hier sein: https://wortschatz.uni-leipzig.de/nextlinks/

Beitrag von **SEOkicks** » 17.02.2012, 12:22

Ich persönlich halte den Overhead (sowohl für die Netzbetreiber als auch für die Websitebetreiber) bei einer Verteilung auf Endnutzerrechner für zu hoch. Wir schaffen aktuell je Crawler einen Durchsatz von etwa 50.000.000 Seiten/Tag wobei gewährleistet ist, dass jede Seite wirklich nur genau einmal abgerufen wird. Würde das Crawling von einer Vielzahl verteilter Clients erfolgen (die jederzeit offline gehen können) würde das ganze schnell sehr ineffizient werden: Entweder werden die gecrawlten Websites viel zu stark durch eine Vielzahl von Abrufen belastet oder die Clients müssen sich in so extrem kurzen zeitlichen Abständen synchronisieren, das dann an dieser Stelle ein riesen Overhead entsteht.

Wie gesagt ist das nur meine persönliche und spontane Einschätzung zu dem Thema, wahrscheinlich bietet es aber genug Spielraum für Diskussionen. Ich möchte aber darum bitten das ggf. in einem eigenen Thread zu tun, damit die Übersicht hier nicht darunter leidet.

Beitrag von **SEOkicks** » 12.04.2012, 12:27

Hirnhamster hat geschrieben:Könnt ihr zu den Domains noch die IP anzeigen? damit man quasie auf einen Blick sieht, ob die Domains zusammengehören..

Besser spät als nie: Inzwischen zeigen wir die IPs mit an. Zudem gibt es bei allen Domainabfragen auch die Werte für Netz- und IP-Pop, die eine noch genauere Analyse/Bewertung ermöglichen. Auch die kostenlose Backlink API wurde entsprechend erweitert.

Wir wurden neulich auf diese Analyse aufmerksam gemacht, die die Aussagekraft von Netz-/IP-Pop schön verdeutlicht.

Beitrag von **danielsun174** » 12.04.2012, 14:09

Neben Domain Pr und Links solltet ihr eventuell auch einen eigenen Wert für die Linkstärke anzeigen und die angezeigten Links nach diesem Ordnen. So wie https://ahrefs.com/ das macht ungefähr.

Beitrag von **SEOkicks** » 14.05.2012, 10:26

Das ist inzwischen (fast) der Fall, die Links werden nun absteigend nach einem selbst berechneten DomainRank sortiert. Noch besser wäre natürlich eine Sortierung nach PageRank, die Sortierung nach DomainRank liefert aber bereits auch sehr brauchbare Ergebnisse und ist fürs Erste etwas ressourcenschonender

Außerdem ging heute übrigens wieder ein Datenupdate live, derzeit bieten wir unter https://www.seokicks.de nun kostenlosen Zugriff auf gut 15,5 Mrd. Linkdatensätze.

Beitrag von **SEOkicks** » 27.08.2012, 14:31

Für alle die unseren Backlinkchecker unter https://www.seokicks.de noch nicht kennen: Seit dem letzten Beitrag in diesem Thread hat sich die Datenbankgröße mit knapp 40 Mrd. Einträgen wieder deutlich mehr als verdoppelt.

Zudem stellen wir heute erstmals die Top 1 Mio. Domains (nach Domainpop) als CSV-Datei zum kostenlosen Download bereits. Neben 1 Mio. Domainnamen samt Domainpop enthält die Datei auch noch Link-, Netz- und IP-Pop zu allen Domains. Für die eine oder andere Tüftelei, Auswertung oder für Benchmarks vielleicht für einige von Euch interessant

Beitrag von **cre8tiveninjas** » 07.09.2012, 07:40

Domain Search: Die "Domain Search" prüft, wie viele Bookmarks in unterschiedlichen Web2.0-Sites die jeweilige Domain innehat. Damit ist es möglich, die "Soziale Popularität" einer Site zu analysieren und mit anderen Domains zu vergleichen.

Beitrag von **Davidvo2012** » 07.09.2012, 08:46

Leider findet SEOKicks neue Backlinks sehr langsam. Aber für ältere Seiten ist der Backlinkchecker echt klasse. Weiter so, gute Arbeit