Hallo,
ich habe gerade meine robots.txt angeschaut.
Ich verwende postnuke. Nach der Installation meines Packets wollte ich nun eine robots.txt einfügen.... dabei habe ich festgestellt, dass ich bereits über eine verfüge (war im packet wohl dabei).
Allerdings habe ich keine Ahnung was deren Text bedeutet, und ob ihr Inhalt Nachteile bringt.
Also hier der Text.... würde mich über ein Statment eurerseits freuen:
User-agent: *
Disallow: admin.php
Disallow: config
Disallow: header
Disallow: footer
Disallow: pntables
Disallow: referer
Disallow: /images
Disallow: /includes
Disallow: /modules/NS-
Disallow: /pnadodb
Disallow: /themes
Disallow: /pnTemp
Disallow: /docs
Disallow: /javascript
Muss ich noch was einfügen... wenn ja wo?
Da ich keinen bot ausschliessen möchte, dürfte doch obiger text reichen... oder sehe ich das falsch?
Archiv