Frage zu robots.txt und Verweise

Beitrag von **NetLook** » 07.02.2007, 11:47

Hallo!

Wie ich gelesesen habe, kann man mit der robots.txt bestimmen, von wem und was nicht indiziert werden soll.

Habe ich das richtig verstanden, das der Robot der Datei- und Verzeichnisstruktur folgt und nicht den Links?

Beispiel:
In der Navigation findet man den Link auf ../cnt/seite.php
Um die Indezierung zu verhindern, müsste ich

Code: Alles auswählen

Disallow&#58; /cnt/seite.php

angeben, was ist aber, wenn ich so verlinke ?cnt=../cnt/seite.php
müsste ich dann nur

Code: Alles auswählen

Disallow&#58; *?

schreiben oder auch

Code: Alles auswählen

Disallow&#58; /cnt/seite.php

Ich möchte nähmlich vermeiden, das dieser Link ?cnt=../cnt/seite.php indeziert wird, ich möchte aber schon die Seite indezieren.

In Google Webmastertools, wurde nähmlich ein Link dieser Art als Fehler angesehen, da ein ? vorkommt.

Wenn das gar nichts mit der robots.txt zu tun hat, wie kann ich dann verhindern, das der Link indeziert wird?

Obwohl, der Robot folgt doch den Links und geht dann in die Datei oder?

Verwirrte Grüße
NetLook

von **Anzeige von ABAKUS** »

Beitrag von **SloMo** » 07.02.2007, 14:45

Mit HTTP Status 301 von ?cnt=../cnt/seite.php nach https://deinedomain/cnt/seite.php weiterleiten, dann wird die ?-URL nicht indiziert, aber der Link trotzdem gezählt.

Beitrag von **NetLook** » 07.02.2007, 15:07

Die werden gezählt?! Das bedeutet, es ist ein Faktor für Google für die Plazierung und der Linkzähler wird um 1 erhöht, aber der Content der Datei nicht eingelesen?!

Also, ich weis grad gar nix mehr.

Wenn ich eine Sitemap erstelle, sollen darin

1. Alle Dateien aufgelistet werden mit dem kompletten Pfad, wie sie auf dem Server liegen ?
https://www.domain.de/ordner/datei.htm

2. Oder alle Verweise ?
https://www.domain.de?cnt=datei.htm

von **Anzeige von ABAKUS** »

Beitrag von **SloMo** » 07.02.2007, 15:45

Wichtig ist eigentlich nur, dass der Content nur über eine URL erreicht werden kann, sonst gibt es DC-Probleme.

Warum beschäftigst Du Dich eigentlich mit Sitemaps. Mach Dir das Leben doch nicht so schwer. Sitemaps sind unnütz, wenn man eine ordentliche Linkstruktur hat. Sie sind nur ein Trick der Sumabetreiber, um SEO zu einer Geheimwissenschaft zu machen.

Beitrag von **NetLook** » 07.02.2007, 17:18

Mit HTTP Status 301 von ?cnt=../cnt/seite.php nach https://deinedomain/cnt/seite.php weiterleiten, dann wird die ?-URL nicht indiziert, aber der Link trotzdem gezählt.

Sind Weiterleitungen nicht "untersagt"?

Wichtig ist eigentlich nur, dass der Content nur über eine URL erreicht werden kann, sonst gibt es DC-Probleme.

Ich habe auf der Seite aber einen Link in der Navigation, dann einen Link auch im Content der auf die gleiche Seite verweist, das ist doch üblich und das sieht Google als DC?!

Auch wenn die Sitemap unnötig ist...Kannst du mir das mal für doofe erklären?!

In der Navigation sind die Verweise in folgender Art:
https://www.domain.de?cnt=datei.htm
Muss ich diesen Verwweis dann auch in die Sitemap so schreiben?

Oder den Pfad, wo die Datei liegt?
https://www.domain.de/ordner/datei.htm

Beitrag von **SloMo** » 08.02.2007, 10:33

Du hast eigentlich 3 Möglichkeiten:

1. mir Glauben schenken (301 ist eine passable Möglichkeit, es gibt aber noch andere!),
2. einen Profi-SEO engagieren und ihm Glauben schenken,
3. Dich selbst etwas tiefer in das Thema einarbeiten.

Lesestoff:
https://www.abakus-internet-marketing.d ... undlag.htm

Zur Frage mit den Links... jede Unterseite sollte über eine einzige URL (=Adresse) erreichbar sein. Wie viele Links Du auf diese eine URL setzt, ist völlig egal, dadurch entsteht kein DC. Warum sollten in einer Sitemap URLs stehen, die nicht anderweitig verlinkt sind? Das macht keinen Sinn...

Beitrag von **NetLook** » 08.02.2007, 13:13

Mit HTTP Status 301 von ?cnt=../cnt/seite.php nach https://deinedomain/cnt/seite.php weiterleiten, dann wird die ?-URL nicht indiziert, aber der Link trotzdem gezählt.

in der Sitemap für Google füge ich folgende URL ein und in der robots.txt schließe ich die URL nicht aus:

www....1....de/seite.php?cnt=datei.php

Die ich ja angeben muss, weil Google der URL ja sonst nicht folgt, wenn ich sie in der Robots.txt auschließen würde und somit wäre eine Weiterleitung doch unsinnig, denn Google würde ja gar nicht der Datei folgen und nicht wissen das dort eine Weiterleitung ist.

Ich müsste ja schon die Navigation umschreiben, Beispiel URL:
www....1....de/weiterleiten_1.php
Und in dieser Datei steht dann die Weiterleitung
?cnt=../cnt/seite.php
zur Themenseite. Aber der Content der Seite wird nicht von Google eingelesen und ausgewertet, dann ist es doch sinnlos.

Beitrag von **SloMo** » 08.02.2007, 15:51

> Ich möchte nähmlich vermeiden, das dieser Link ?cnt=../cnt/seite.php indeziert wird, ich möchte aber schon die Seite indezieren.

Vergiss die Weiterleitung, vergiss die Sitemap. Was Du da oben beschrieben hast, geht nicht. Eine Seite wird unter ihrer URL indiziert, oder gar nicht. Was Du suchst, ist glaube ich mod_rewrite.

Beitrag von **NetLook** » 08.02.2007, 16:40

SloMo hat geschrieben:Vergiss die Weiterleitung, vergiss die Sitemap. Was Du da oben beschrieben hast, geht nicht. Eine Seite wird unter ihrer URL indiziert, oder gar nicht. Was Du suchst, ist glaube ich mod_rewrite.

Ich denke auch, entweder dass oder Navigation umschreiben

Kann Google denn jetzt keiner URL folgen, die ein ? enthält?

Wenn ich von www....1....de auf www....2....de/cnt?ct=datei.php verweise,
wird Google diesen Link nicht folgen und der Backlink für www....2....de
wird somit wertlos?!