.htaccess und robots.txt

[|SONY|]

hallo zusammen,

meine startseite ist die index.pxp und wenn ich folgende htaccess hochlade, den link brasilgate.com eingebe funktioniert es (www.) aktualisiere ich dann den browser ist die seite weg ?

Code: Alles auswählen

#RewriteBase /
RewriteEngine On
RewriteCond %{HTTP_HOST} ^brasilgate.com$ [NC]
RewriteRule ^(.*) http://www.Brasilgate.com/$1 [L,R=301]

frage zur robots

ich habe im IE gestöbert weil sitemaps meine robots anmeckert bzw. sie nicht findet und habe folgendes versucht:

Code: Alles auswählen

User-agent: EmailCollector
Disallow: /

meine fragen bitte.

wie kann ich die htaccess anpassen ?

welche robots sollte ich wählen damit sie für gute crawler erkannt wird ?

muss ich eigentlich beides sitemaps code und robots txt in alle seiten einbinden oder reicht die startseite die ja von .com/index.php durch die htaccess anders lautet ?

vielen dank
sony

PS: meine html seiten werden alle anerkannt von sitemaps !?

link in der sig

[|SONY|]

hallo zusammen,

was ich gerade noch gesehen habe ist, es kann nicht am fehler 404(nicht gefunden) liegen denn ich habe eine html bei den sitemaps aktiv wo ich keine robots.txt habe !?

kann es doch an etwas anderem liegen !?

ich würde mich sehr freuen wenn ihr mir helfen könntet.

vielen dank
sony

[matin]

hallo,

hab's zwar nicht ganz verstanden, versuch es aber mal. grundsätzlich brauchst du für jede domain nur eine robots.txt. dieses tool hilft dir im notfall ein wenig, wenn du sie nicht selber schreiben kannst: https://www.searchcode.de/robotstxt.php. die robots.txt speicherst du in deinem root-verzeichnis.

soweit ich es auf deiner seite gesehen habe, funktioniert die weiterleitung per .htaccess ja schon ...

was du mit dem 404er meinst, weiß ich leider nicht ...

[|SONY|]

das mit dem 404er bekomme ich bei der web-crawl abfrage bei google sitemaps:

https://www.google.com/support/webmaste ... 0209&hl=de