ABAKUS

alle nicht roboter/crawler etc sehen natürlich deine seite, wenn du einen pfad dahin gelegt hast, kommt man halt eben drauf. mit der robot.txt verbietest du NUR robots die seite zu crawlen und zu indexieren. Wenn du nicht willst das generell darauf zugegriffen werden kann, solltest du sie einfach offline nehmen.

wenn du nun also ein keyword, wie zb. riesenpenis hast, auf das du rankst, du willst aber nicht, dass die leute über das wort riesenpenis bei dir landen, dann gehst du auf google, gibst riesenpenis ein, und schaust zu welcher deiner seiten dich google schickt, und wegen welchem textauszug.

Nehmen wir an google linkt jetzt auf deine-seite.de/riesenpenis, dann gibst du in deine robot.txt. ein disallow /riesenpenis.php

Viel Spaß

Typisch Frau - besseres Beispiel is Dir ned eingefallen

szibirhusky hat geschrieben:Typisch Frau - besseres Beispiel is Dir ned eingefallen

kann an nichts anderes denken

dacht ich mir schon

Der Riesenpenis veranschaulicht das sehr klar! Vielen Dank für Deine sehr anschauliche Ausführung, she!

Jedoch war mir dieser Mechanismus der Robots.txt Datei inzwischen klar. Was mir noch ein Rätsel bleibt, ist, hinter welchem Pfad sich der ganze Inhalt der von mir erwähnten Seite befindet:

Disallow: /hbdb/scShared/shared/
Disallow: /db/soft/ueberblick.html
Disallow: /cgi-bin/KSR_Java_Gate.cgi/db/soft/ueberblick.html
Disallow: /Details
Disallow: /hbas

Kann mir dazu jemand eine Antwort geben?

schreib mir doch mal das keyword was dich stört und seite... vielleicht steh ich auch nur auf dem schlauch und versteh deine frage nicht... (PN)

she hat geschrieben:schreib mir doch mal das keyword was dich stört und seite... vielleicht steh ich auch nur auf dem schlauch und versteh deine frage nicht... (PN)

evtl. wäre es auch etwas hilfreich dich in den Thematischen Bereichen auch nur zu Wort zu melden, wenn du weist um was es geht und wirklich etwas fundiertes dazu sagen kannst...

Gerne, she!

Also es geht um die Seite https://www.top-toner. ch. Diese bindet den Inhalt per iframe von https://www3.liefert-es.com ein. Und eben dieser Inhalt wird wegen der robots.txt nicht indexiert - was auch absolut nachvollziehbar ist.

Mir ist jedoch nicht klar, wo sich dieser Inhalt exakt befindet, denn es sind in der robots.txt-Datei ja mehrere Verzeichnisse gesperrt. Wenn ich mir im Browser exakt diese Verzeichnisse anzeigen lasse, erscheinen alle möglichen Dinge, jedoch nicht der Inhalt der Webseite. Es geht mir also darum, möglichst exakt zu verstehen, wie (also durch welche Dateien, Verzeichnisse, etc.) der Inhalt vom indexieren ausgeschlossen wird. Das ist für mich die grosse Frage...

Besten Dank für Deine Hilfsbereitschaft!

ok, jetzt versteh ichs ... und muss dir sagen, das ich es nicht sagen kann... und das ich es nicht mag wenn netti recht hat ...
mit frame einbindungen habe ich noch nicht gearbeitet, sorry!

wenn man das ganze mit ein bißchen logik angeht, müsste es aber einer der datenbanken sein. aus diesen generiert der frame ja den content. Sind diese gesperrt, kann google den content nicht auslesen. Aber wie immer: gefähliches Halbwissen *ächtz*

...trotzdem vielen Dank für Deine Antwort und für Deine Bemühungen, she!

Vielleicht kann mir ja sonst jemand weiterhelfen... denn, dass sich mindestens ein kritisches Element hinter den robot.txt Einträgen befindet (welches für den Aufbau der Seite essentiell ist) ist mir klar. Nur würde ich es eben gerne genauer wissen?

she hat geschrieben:alle nicht roboter/crawler etc sehen natürlich deine seite, wenn du einen pfad dahin gelegt hast, kommt man halt eben drauf. mit der robot.txt verbietest du NUR robots die seite zu crawlen und zu indexieren. Wenn du nicht willst das generell darauf zugegriffen werden kann, solltest du sie einfach offline nehmen.

wenn du nun also ein keyword, wie zb. riesenpenis hast, auf das du rankst, du willst aber nicht, dass die leute über das wort riesenpenis bei dir landen, dann gehst du auf google, gibst riesenpenis ein, und schaust zu welcher deiner seiten dich google schickt, und wegen welchem textauszug.

Nehmen wir an google linkt jetzt auf deine-seite.de/riesenpenis, dann gibst du in deine robot.txt. ein disallow /riesenpenis.php

Viel Spaß

Ach, ich hatte schon gedacht, Abakus rankt jetzt für Riesenpenis. Dieses Wort ist nämlich nicht nur inhaltlich interessant, sondern auch sprachwissenschaftlich. Zum Beispiel könnte man darüber philosophieren, ob vlt. ein Riesen-Penis, d.h. der eines Riesen, gemeint ist.

SeriousBadMan hat geschrieben:Ach, ich hatte schon gedacht, Abakus rankt jetzt für Riesenpenis. Dieses Wort ist nämlich nicht nur inhaltlich interessant, sondern auch sprachwissenschaftlich. Zum Beispiel könnte man darüber philosophieren, ob vlt. ein Riesen-Penis, d.h. der eines Riesen, gemeint ist.

Sag mal bist Affilli bei nem Anbeiter für Riesenpenis Prdukte und bekommst Profi
Kann gerne mit nem Link von ner Ero Seite aushelfen für Riesenpenis (wenn da des Wort so gfallt)

so jetzt aber Schluß´mit dem Wort sonst Rankt Abakaus heut wirklich dazu , hihi