robots.txt
Verfasst: 05.12.2005, 20:55
Wie kann ich Dyn Seiten per Robots für alle Sumas sperren?
User-Agent: *
disallow: /?
Ist das richtig?
danke
Daniel
User-Agent: *
disallow: /?
Ist das richtig?
danke
Daniel
ABAKUS
Ihr Partner in Sachen SEO und Online Marketing
https://archiv.abakus-internet-marketing.de/foren/
robots.txt
https://archiv.abakus-internet-marketing.de/foren/viewtopic.php?f=52&t=21271
Seite 1 von 1
Verfasst:
robots.txt
Verfasst: 05.12.2005, 22:19
Hallo Daniel,
ich fürchte, es gibt keine Möglichkeit, dynamische Seiten für alle Sumas gleichzeitig zu sperren, es sei denn, die dynamischen Seiten liegen allesamt in einem bestimmten Ordner oder haben denselben Dateinamen-Anfang.
Für Google sollte folgendes klappen:
User-agent: Googlebot
Disallow: /*?
Andere Sumas kennen aber keine Platzhalter (*). Mit Disallow: /? würdest Du nur alle Dateien und alle Ordner ausschließen, die mit einem "?" beginnen.
LG, Hobby-SEO
ich fürchte, es gibt keine Möglichkeit, dynamische Seiten für alle Sumas gleichzeitig zu sperren, es sei denn, die dynamischen Seiten liegen allesamt in einem bestimmten Ordner oder haben denselben Dateinamen-Anfang.
Für Google sollte folgendes klappen:
User-agent: Googlebot
Disallow: /*?
Andere Sumas kennen aber keine Platzhalter (*). Mit Disallow: /? würdest Du nur alle Dateien und alle Ordner ausschließen, die mit einem "?" beginnen.
LG, Hobby-SEO
robots.txt
Verfasst: 05.12.2005, 22:33
danke bin ich wenigsten wieder nen bisschen schlauer... 
Verfasst: 12.12.2005, 21:32
Habe ein ähnliches Problem, wie sperre ich alle Verweise, die mit index.php? anfangen --> meine dynamischen Seiten fangen alle mit index.php (Mambo) an, da ich modrewrite einsetze könnte das jedoch zu DC führen.
Deshalb brauche ich eine Regel um die dynamischen Seiten zu sperren. Wäre sowas richtig:
User-Agent: *
disallow: /index.php?
Deshalb brauche ich eine Regel um die dynamischen Seiten zu sperren. Wäre sowas richtig:
User-Agent: *
disallow: /index.php?
robots.txt
Verfasst: 12.12.2005, 21:41
@hansmaiser:
Ja, ist richtig.
Theoretisch müsste auch ein Disallow: /index.php und sogar ein Disallow: /index genügen.
LG, Hobby-SEO
Ja, ist richtig.
Theoretisch müsste auch ein Disallow: /index.php und sogar ein Disallow: /index genügen.
LG, Hobby-SEO
robots.txt
Verfasst: 12.12.2005, 22:51
Wenn ich aber Disallow: /index schreiben würde, dann würde ich doch auch meine Startseite sperren oder?
robots.txt
Verfasst: 12.12.2005, 22:57
Das kommt darauf an, wie Deine Startseite lautet. Du kannst ja in die .htaccess Folgendes reinschreiben:
DirectoryIndex startseite.html
In diesem Fall heißt Deine Startseite startseite.html
In Deinem Fall würde ich Dir aber folgende robots.txt empfehlen:
User-agent: Googlebot
Disallow: /*?
LG, Hobby-SEO
DirectoryIndex startseite.html
In diesem Fall heißt Deine Startseite startseite.html
In Deinem Fall würde ich Dir aber folgende robots.txt empfehlen:
User-agent: Googlebot
Disallow: /*?
LG, Hobby-SEO
robots.txt
Verfasst: 12.12.2005, 23:34
Hmm, weiss selber nicht wie meine Startseite heisst, ich leite die Startseite per modrewrite auf / um, welche Datei das ist weiss ich nicht...
Was mache ich mit den anderen Bots, die Disallow: /*? nicht verstehen. Ich mein, ich will ja nicht unbedingt DC in den anderen Suchmaschinen produzieren.
Was mache ich mit den anderen Bots, die Disallow: /*? nicht verstehen. Ich mein, ich will ja nicht unbedingt DC in den anderen Suchmaschinen produzieren.
Damit erreiche ich doch nur, dass der GoogleBot die dynamischen Seiten nicht spidert, aber Yahoo & msn würden es doch tun, oder?User-agent: Googlebot
Disallow: /*?
robots.txt
Verfasst: 12.12.2005, 23:54
Ja, Disallow: /*? funktioniert nur für den Googlebot. Schreib Folgendes in Deine robots.txt - dann bist Du auf der sicheren Seite:
User-agent: *
Disallow: /index.php?
LG, Hobby-SEO
User-agent: *
Disallow: /index.php?
LG, Hobby-SEO