Herzlich willkommen im Archiv vom ABAKUS Online Marketing Forum
Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.
auch derselbe Laden:Robot / Crawler
Die Datei robots.txt ist eine Standardmöglichkeit um Robots / Crawler zu steuern.
Nähere Informationen können Sie hier nachlesen
Wenn Sie nicht wünschen, dass unser Robot Ihre Seiten besucht und in diesem Suchdienst verfügbar macht, können Sie unseren Bot mit dem folgenden Eintrag in Ihrer robots.txt aussperren:
User-agent: MyEngines-Bot
Disallow: /
Wenn Sie unserem Bot einzelne Verzeichnisse verbieten wollen, erreichen Sie dies mit dem folgenden Eintrag
User-agent: MyEngines-Bot
Disallow: /verzeichnis_1/
Disallow: /verzeichnis_2/
Seltsam, bei Google beschwert sich keiner.Japs hat geschrieben:Ich finde es genrell eine Frechheit, dass man gelistet wird, wo man es gar nicht will - ungefragt und dann soll sich noch der Betreffende die Mühe selbst machen, dass dort kein Eintrag passiert.
Genau dafür gibt es ein anerkanntes Protokoll namens robots.txt - die Rechtssprechung geht mittlerweile davon aus, dass du konkludent eine Einwilligung zur Aufnahme in Suchmaschinen gibts, wenn dies nicht in der robots.txt untersagt wird (LG Erfurt 2007). Und um nichts anderes handelt es sich hier doch.Japs hat geschrieben:Es sollte schon Jemdem selbst überlassen werden, wo er wie gelistet sein möchte oder ?
Dafür müsten die Dumpfbacken sich als Spider erst mal identifizieren, machen sie natürlich nicht. Sogesehen ist deine Einlassung zwar korrekt aber recht weltfremd.Lord Pixel hat geschrieben:Genau dafür gibt es ein anerkanntes Protokoll namens robots.txt - die Rechtssprechung geht mittlerweile davon aus, dass du konkludent eine Einwilligung zur Aufnahme in Suchmaschinen gibts, wenn dies nicht in der robots.txt untersagt wird (LG Erfurt 2007). Und um nichts anderes handelt es sich hier doch.Japs hat geschrieben:Es sollte schon Jemdem selbst überlassen werden, wo er wie gelistet sein möchte oder ?
Na das ist ja mal ein genialer Vergleich, erkennt man sofort aus welchen Lager die Poster kommen. Auf Listung in den überflüssigen Teilen verzichte ich gerne, auf die Präsenz im Google Index sehr ungern.SloMo hat geschrieben:Seltsam, bei Google beschwert sich keiner.