Wie lang kann eine Robots.txt sein

[Unifex]

Die Frage steht soweit im Titel. Also wie viele Zeilen darf sie haben. damit sie noch gelesen werden kann von den Bots.
Hintergrund ist, das ich in einem neuen Forum eine Menge Themen sperren muss, damit die nicht gecrawlt werden.

Da kommen schon ein paar Einträge zusammen.

[InControL]

https://developers.google.com/webmaster ... _txt?hl=de

"[...] Google currently enforces a size limit of 500kb."

[umwelt]

hallo,
wäre es nicht einfacher, das in den beiträgen selbst über ein admin-zusatzfeld festzulegen und dann noindex + nofollow anzugeben?
viele grüße!

[Unifex]

hallo,
wäre es nicht einfacher, das in den beiträgen selbst über ein admin-zusatzfeld festzulegen und dann noindex + nofollow anzugeben?
viele grüße!

Das wäre cool, wenn ich wüsste wie das geht.

Ist ein Xenforo.

[umwelt]

wenn's Dir was wert ist, kann ich es mir gern mal anschaun
Dürfte im Grunde nur ein "Flag" sein, das gesetzt werden müsste und eine template-anpassung.