Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

Weiß jemand von euch vielleicht ob man in der robots.txt

Neues Thema Antworten
Google+ Import-Bot
Systemnutzer
Beiträge: 770
Registriert: 11.12.2012, 18:29

Beitrag von Google+ Import-Bot » 02.02.2013, 18:12

Weiß jemand von euch vielleicht ob man in der robots.txt beim User Agent Wildcards setzen kann?

User-agent: Java/1.6.0_*
Disallow: /?
Autor2310: Viktor Dite

Quelle: https://plus.google.com/112457602357038 ... JEe1rZzd9Q

Anzeige von ABAKUS

von Anzeige von ABAKUS »

SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002
  • persönliche Betreuung
  • individuelle Beratung
  • kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.


WilliWusel
PostRank 9
PostRank 9
Beiträge: 1257
Registriert: 21.08.2006, 14:55

Beitrag von WilliWusel » 05.02.2013, 17:32

=> https://de.selfhtml.org/diverses/robots.htm
Bei User-agent: ist entweder die Angabe * (Sternzeichen) erlaubt, was so viel bedeutet wie "alle Robots", oder der Name eines bestimmten Robots. Diesen Namen müssen Sie allerdings kennen. Wenn Sie * angeben, sollte in dem gleichen Datensatz keine weitere Angabe zu User-agent folgen, da dies dem Platzhalter für "alle" widersprechen würde.

Antworten
  • Vergleichbare Themen
    Antworten
    Zugriffe
    Letzter Beitrag