Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

Trotz robots.txt werden Seiten indexiert :(

Alles zum Thema: Robots, Spider, Logfile-Auswertung und Reports
Neues Thema Antworten
onlinegeiz
PostRank 4
PostRank 4
Beiträge: 188
Registriert: 15.01.2005, 16:22
Wohnort: Mülheim an der Ruhr

Beitrag von onlinegeiz » 19.01.2005, 05:10

Der Google Bot indexiert alle Seiten. Auch die, die er nicht soll.

Kann mir jemand erlären warum das passiert?

Ist vieleicht meine robots.txt falsch?
User-agent: *
Disallow: /address_book_process.php
Disallow: /account.php
Disallow: /account_edit.php
Disallow: /account_edit_process.php
Disallow: /account_history.php
Disallow: /account_history_info.php
Disallow: /address_book.php
Disallow: /checkout_process.php
Disallow: /advanced_search.php
Disallow: /advanced_search_result.php
Disallow: /checkout_address.php
Disallow: /checkout_confirmation.php
Disallow: /checkout_payment.php
Disallow: /checkout_success.php
Disallow: /contact_us.php
Disallow: /create_account.php
Disallow: /create_account_guest.php
Disallow: /create_account_process.php
Disallow: /create_account_success.php
Disallow: /info_shopping_cart.php
Disallow: /login.php
Disallow: /logoff.php
Disallow: /password_double_opt.php
Disallow: /popup_image.php
Disallow: /popup_search_help.php
Disallow: /privacy.php
Disallow: /product_notifications.php
Disallow: /product_reviews.php
Disallow: /product_reviews_info.php
Disallow: /reviews.php
Disallow: /shipping.php
Disallow: /admin/
Disallow: /export/
Disallow: /download/
Disallow: /includes/
Disallow: /pub/
Disallow: /media/
DANKE

Anzeige von ABAKUS

von Anzeige von ABAKUS »

SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002
  • persönliche Betreuung
  • individuelle Beratung
  • kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.


SEO-Guy
PostRank 1
PostRank 1
Beiträge: 25
Registriert: 12.10.2004, 20:04

Beitrag von SEO-Guy » 19.01.2005, 08:14

nur unterverzeichnisse werden nicht eingelesen

onlinegeiz
PostRank 4
PostRank 4
Beiträge: 188
Registriert: 15.01.2005, 16:22
Wohnort: Mülheim an der Ruhr

Beitrag von onlinegeiz » 19.01.2005, 14:30

SEO-Guy hat geschrieben:nur unterverzeichnisse werden nicht eingelesen
Und was ist mit den php files????

Was sollte den da stehen, damit die auch nicht ausgelesen werden?

DANKE

Mario670
PostRank 9
PostRank 9
Beiträge: 1006
Registriert: 30.04.2004, 20:46
Wohnort: Neu Duvenstedt

Beitrag von Mario670 » 19.01.2005, 14:32

Benutz mal die Suche, das gibt es massig Beiträge drüber
Bild
SEOigg ... SEO News satt

onlinegeiz
PostRank 4
PostRank 4
Beiträge: 188
Registriert: 15.01.2005, 16:22
Wohnort: Mülheim an der Ruhr

Beitrag von onlinegeiz » 19.01.2005, 15:01

Ich habe schon die suche benutze... aber trotzdem nicht das gefunden wonach ich gesucht habe.

Viele verweisen auf diese org seite auf die auch google verweist.

Aber bei mir in der roboters.txt habe ich genau das meiner meinung nach stehen wie es beschrieben wird. da es trzdem nicht klapt, frage ich jetzt hier.

Einfach einmal meine Datei richtig schreiben. und alle die auch das problem haben sollten können sich ein bsp. nehmen.

DANKE

Jojo
PostRank 9
PostRank 9
Beiträge: 2847
Registriert: 19.03.2004, 10:33
Wohnort: Papenburg

Beitrag von Jojo » 19.01.2005, 15:10

robots.txt nennt sich die.

Ich gehe davon aus das sie schon funktioniert. Man sollte sich wohl nicht davon irritieren lassen wenn Google bei der site-Abfrage die Url anzeigt. Google mag die Url kennen, aber hat diese wohl nicht gespidert.

JR-EWING
PostRank 9
PostRank 9
Beiträge: 1098
Registriert: 19.02.2004, 10:16
Wohnort: Untermeitingen

Beitrag von JR-EWING » 19.01.2005, 15:23

Bei der Site Abfrage steht unter dem link dann nur "ähnliche Seiten" und es wird keine Beschreibung angezeigt.

onlinegeiz
PostRank 4
PostRank 4
Beiträge: 188
Registriert: 15.01.2005, 16:22
Wohnort: Mülheim an der Ruhr

Beitrag von onlinegeiz » 19.01.2005, 16:53

JR-EWING hat geschrieben:Bei der Site Abfrage steht unter dem link dann nur "ähnliche Seiten" und es wird keine Beschreibung angezeigt.

Wenn das so ist, verstehe ich nicht warum google die seiten indexiert hat, wie man es auf der nachfolgenden seite sehen kann.

https://www.google.de/search?hl=de&q=si ... z.de&meta=

JR-EWING
PostRank 9
PostRank 9
Beiträge: 1098
Registriert: 19.02.2004, 10:16
Wohnort: Untermeitingen

Beitrag von JR-EWING » 19.01.2005, 17:27

Beispiel: deine create_account.php
D.h Google weiß daß es die Seite gibt aber nicht was draufsteht.

onlinegeiz
PostRank 4
PostRank 4
Beiträge: 188
Registriert: 15.01.2005, 16:22
Wohnort: Mülheim an der Ruhr

Beitrag von onlinegeiz » 19.01.2005, 17:47

JR-EWING hat geschrieben:Beispiel: deine create_account.php
D.h Google weiß daß es die Seite gibt aber nicht was draufsteht.
Was soll ich den machen, damit google es nicht mehr weiß??? Die soll ja im Index überhaupt nicht auftauchen.

brise
PostRank 3
PostRank 3
Beiträge: 73
Registriert: 06.11.2004, 22:12
Wohnort: Köln

Beitrag von brise » 19.01.2005, 22:47

Du kannst die Seiten für 90 (?) Tage aus dem Index ausblenden lassen und zwar mit diesem Tool -> https://services.google.com:8882/urlconsole/controller

Benutzung auf eigenes Risiko 8)
Frag mal die Suchfkt. nach 'urlconsole'

Antworten
  • Vergleichbare Themen
    Antworten
    Zugriffe
    Letzter Beitrag