archive.org via robots.txt blocken
Verfasst: 24.01.2010, 12:47
Welche Vor- oder Nachteile kann es haben archive.org via robots.txt zu blocken?
Ihr Partner in Sachen SEO und Online Marketing
https://archiv.abakus-internet-marketing.de/foren/
https://archiv.abakus-internet-marketing.de/foren/viewtopic.php?f=65&t=81232
Code: Alles auswählen
User-agent: ia_archiver
Disallow: /
User-agent: ia_archiver/1.6
Disallow: /
Dem stimme ich zu.überlege auch du selbst, wofür du das brauchst[
Mir fällt dazu ein, dass mir archive.org mal geholfen hat einen Content-Klau zu "beweisen". Sache wurde im Vorfeld, also ohne Gericht, geregelt. Aber ein richtiger Freund dieses Dienstes bin ich nicht.Offensichtlich fällt uns beiden da bisher nichts ein.
Die Abakus robots.txt benutze ich schon seit Jahren. Ich bin mir mittlerweile nur nicht mehr sicher, ob es bei Domains, die man evtl. mal verkaufen möchte evtl. auch ein Nachteil sein kann, da sich ohne archive.org-Eintrag, das Domain-Alter relativ schwer bestimmen lässt. Das Alter wertet jedoch eine Domain imho immer etwas auf.pr_sniper hat geschrieben:Es gibt also nur Vorteile, auf diesen Dienst zu verzichten.
Nicht zuletzt: schau mal, was Abakus seit Jahren tut ... Von Abakus lernen heißt ...