Newbie frage zu robots.txt

[Jürgen]

hallo alle zusammen,
erst mal sorry wegen der newbie frage aber ihr habt mir hier immer nett und freundlich geholfen und ich hoffe das ihr das auch dieses mal könnt
ich habe mir jetzt eine robots.txt erstellt (standart) die folgendermassen aussieht.

Code: Alles auswählen

User-agent: *
Disallow:

nu weiss ich nich genau wo ich sie hinpacken soll mein blog liegt nicht im root es liegt in einem verzeichniss unter https://www.meinedomain.com/blog/
auf der https://www.meinedomain.com liegt nur eine index datei die ein link zur blog url aufweisst (siehe oben) muss ich die robots.txt nu ins absolute root packen oder in mein blog verzeichnis?

vielen vielen dank schon mal an alle fleissigen helfer!

mfg Jürgen

[mariow]

Die robots.txt muss immer im Root-Verzeichnis einer Domain liegen da sie nur dort angefragt wird. Es gibt keinen Weg die Datei gültig wo anders abzulegen.
Dementsprechend musst du die robots.txt als https://www.meinedomain.com/robots.txt verfügbar machen.

Btw: Wenn man dem Protokoll ganz genau folgt, muss die Datei mit einer leeren Zeile enden

[Jürgen]

ahhh das mit der leeren zeile hab ich nich. danke für den tip! werde ich gleich einbasteln

mfg Jürgen

[mariow]

Wirklich fatal ist das nicht, die leere Zeile steht in fast keiner robots.txt und vermutlich gibts keinen Bot der sich dran stört

[Jürgen]

hehe jo ok danke für die info. aber wenn es 'eigendlich' mit einer leerzeile enden soll dann is das ja
kein problem das fix zu machen

danke noch mal.. wie immer wurde mir hier 100%tig geholfen

mfg Jürgen