Schertzkekse auf seo-phpbb.org

[GreenHorn]

Würde mich mal interessieren wieviele user sich diese robots.txt hochgelagen haben...


seo-phpbb.org

[raxon]

Wenn man keine Ahnung hat...

Das ist schon richtig so. Sonst könnte es ja DC geben.

[oldInternetUser]

Der Verfasser steckt wahrscheinlich noch ein wenig in der Pubertät:

Die großen Suchmaschinen sehen das als Spam an und beschlafen Seiten die viel Doppelten Content enthalten.

Wie beschläft eine Suchmaschine eine Seite?

PS: Wie war das im Sommer, daß Foren so viele Seiten verloren haben? Die haben wohl alle diese robots.txt verwendet.

[[btk]tobi]

@GreenHorn & oldInternetUser:
Das hat schon seine Richtigkeit, Google soll die viewtopic.php ja auch nicht holen sondern bla-bla-t1.html, dass das in Wirklichkeit die viewtopic.php ist weiß ja nur der Server

Schau dir mal https://www.seo-phpbb.org/robots.txt, da sind praktisch alle Dateien aus dem Forum geprerrt. Trotzdem hat Google das Forum im Index *klick*

[GreenHorn]

Ja klar, Denkfehler. Ne blanke viewtopic gibts ja nicht...

[oldInternetUser]

@[btk]tobi: Deine Aussage stimmt, wenn das gesamte Forum mit mod_rewrite umgeschrieben worden ist. Nur ist auf dieser Seite davon nicht die Rede.

Wenn sich jemand Ahnungsloses (und für so jemanden ist die Seite ja gedacht) das durchliest, dann sagt er sich: 'Na das geht ja flott, das mache ich gleich mal, die 'sauberen Urls' (im nächsten Kapitel) sehe ich mir erst in ein paar Wochen an'.

Und schon ist das Forum draußen.

Da müßte zumindest ein fetter Warnhinweis dazu: 'Diese Zeile nur dann, falls ...'.

PS: Da ich die Standardinstallation nicht kenne: Wenn es keine blanke viewtopic.php gibt, dann bräuchte man diese auch nicht aussperren, dann wäre die Zeile immer sinnlos.

[[btk]tobi]

Wenn sich jemand Ahnungsloses (und für so jemanden ist die Seite ja gedacht) das durchliest, dann sagt er sich: 'Na das geht ja flott, das mache ich gleich mal, die 'sauberen Urls' (im nächsten Kapitel) sehe ich mir erst in ein paar Wochen an'.

Daran hab ich jetzt noch garnicht gedacht, aber stimmt es könnte Leute geben die das so machen. Ich werde da einen Hinweiß einbauen.

Wenn es keine blanke viewtopic.php gibt, dann bräuchte man diese auch nicht aussperren, dann wäre die Zeile immer sinnlos.

Die viewtopic.php wird zwar für Gäste nicht mehr angelinkt. Aber es kann ja sein dass jemand trozdem einen Link drauf setzt oder es noch alte Links zur viewtopic.php gibt.
Eigentlich müsste man garnichts sperren, da SEO phpBB für Gäste nur auf Seiten linkt die nicht gesperrt sind.

[oldInternetUser]

Eigentlich müsste man garnichts sperren, da SEO phpBB für Gäste nur auf Seiten linkt die nicht gesperrt sind.

???

Da steht nirgends auf der Seite, daß man das SEO phpBB verwenden müsse (bzw. eine solche robots.txt nur in diesem Fall so nutzen könne), das wohl die viewtopic.php dann ausblendet (bzw. nicht mehr verlinkt).

Die Seite liest sich so, als ob die Ratschläge für aktuelle, rohe phpBB-Installationen einsetzbar wären.

Und wenn in einer solchen Standardinstallation (ohne SEO phpBB und ohne mod_rewrite) die viewtopic.php normal verwendet wird (um die Topics anzuzeigen), dann sperrt eine solche robots.txt alle Topics - und schmeißt das Forum damit raus.

[GreenHorn]

Also doch. Ein wenig Verwirrung meinerseits.

[[btk]tobi]

Und wenn in einer solchen Standardinstallation (ohne SEO phpBB und ohne mod_rewrite) die viewtopic.php normal verwendet wird (um die Topics anzuzeigen), dann sperrt eine solche robots.txt alle Topics - und schmeißt das Forum damit raus.

Nein, viewtopic.php != viewtopic.php?t=...
Selbst wenn man diese robots.txt für ein standart phpBB verwendet, fliegen also keine Beiträge raus.

Also doch. Ein wenig Verwirrung meinerseits.

Stimmt, könnte passieren. Deshalb hab ich die Seite jetzt auch aktualisiert, damit deutlicher ist was gemeint ist.

[oldInternetUser]

Nein, viewtopic.php != viewtopic.php?t=...
Selbst wenn man diese robots.txt für ein standart phpBB verwendet, fliegen also keine Beiträge raus.

Das ist zwar logisch korrekt (linke Seite ist verschieden von der rechten Seite), aber falsch für die robots.txt

An alle Disallow-Ausdrücke wird implizit rechts '*' angehängt.

Disallow: /viewtopic.php

sperrt auch alle /viewtopic.php?t=...

Zitat: https://www.robotstxt.org/wc/norobots.html

Disallow
The value of this field specifies a partial URL that is not to be visited. This can be a full path, or a partial path; any URL that starts with this value will not be retrieved. For example, Disallow: /help disallows both /help.html and /help/index.html, whereas Disallow: /help/ would disallow /help/index.html but allow /help.html.

a partial Url