Robots.txt wird ignoriert

Beitrag von **onlinegeiz** » 16.01.2005, 18:37

Meine robots.txt sieht wie folgt aus:

User-agent: *
Disallow: address_book_process.php
Disallow: account.php
Disallow: account_edit.php
Disallow: account_edit_process.php
Disallow: account_history.php
Disallow: account_history_info.php
Disallow: address_book.php
Disallow: checkout_process.php
Disallow: advanced_search.php
Disallow: advanced_search_result.php
Disallow: checkout_address.php
Disallow: checkout_confirmation.php
Disallow: checkout_payment.php
Disallow: checkout_success.php
Disallow: contact_us.php
Disallow: create_account.php
Disallow: create_account_guest.php
Disallow: create_account_process.php
Disallow: create_account_success.php
Disallow: info_shopping_cart.php
Disallow: login.php
Disallow: logoff.php
Disallow: password_double_opt.php
Disallow: popup_image.php
Disallow: popup_search_help.php
Disallow: privacy.php
Disallow: product_notifications.php
Disallow: product_reviews.php
Disallow: product_reviews_info.php
Disallow: reviews.php
Disallow: shipping.php
Disallow: admin/
Disallow: export/
Disallow: download/
Disallow: includes/
Disallow: pub/
Disallow: media/

Jedoch verstehe ich nicht wie google zu diesem Ergäbnis kommt?

https://www.google.de/search?sourceid=n ... Dgeiz%2Ede

Die Datei ist im root Verzeichnis und war schon vom Anfang an dabei.

von **Anzeige von ABAKUS** »

SEO Consulting bei ABAKUS Internet Marketing
Erfahrung seit 2002

persönliche Betreuung
individuelle Beratung
kompetente Umsetzung

Jetzt anfragen: 0511 / 300325-0.

Beitrag von **bull** » 16.01.2005, 18:42

Format der Disallows stimmt nicht.
https://www.robotstxt.org/wc/exclusion-admin.html

Beitrag von **onlinegeiz** » 16.01.2005, 18:47

Also müsste das so heißen:

User-agent: *
Disallow: /shipping.php

Beitrag von **onlinegeiz** » 16.01.2005, 19:15

Könnte mir jemand bitte helfen und sagen wie es richtig aussehen sollte???

Und wie kann ich Directory Listing für mein imgage Verzeichnis unterbinden???

DANKE!!!

Beitrag von **brise** » 16.01.2005, 20:23

onlinegeiz hat geschrieben:Und wie kann ich Directory Listing für mein imgage Verzeichnis unterbinden?

Lege eine .htaccess in deinem image Verzeichnis an und schreibe diese Zeile rein:

Code: Alles auswählen

IndexIgnore *

oder wenn du nur die Anzeige von *.gif, *.jpg, etc unterbinden willst schreib diese Zeile

Code: Alles auswählen

IndexIgnore *.gif *.jpg

Beitrag von **olli** » 16.01.2005, 20:32

Format der Disallows stimmt nicht.
https://www.robotstxt.org/wc/exclusion-admin.html

schau dir aber trotzdem die von Bull gepostete URL an.

Ich bin der Meinung das das verstecken/nicht erlauben gerade Leute anzieht zu probieren was geht.

Zumal sie per robots.txt sehen wie dein verzeichnis angelegt ist.

olli

Beitrag von **onlinegeiz** » 17.01.2005, 01:47

olli hat geschrieben:
Format der Disallows stimmt nicht.
https://www.robotstxt.org/wc/exclusion-admin.html
schau dir aber trotzdem die von Bull gepostete URL an.

Ich bin der Meinung das das verstecken/nicht erlauben gerade Leute anzieht zu probieren was geht. Zumal sie per robots.txt sehen wie dein verzeichnis angelegt ist.

olli

Die Bilder sollen ja im Shop angezeigt werden. Nur wenn man meine URL/image eingibt kommt man in den Bilder Ordner.. Schreibrechte habe ich weggenommen.

Wenn man diese URL eingibt, soll einfach über Umleitung auf die Index gehen.