llms.txt soll Agenten das Lesen einer Website erleichtern. Statt HTML mit Navigation und Skripten erhalten sie eine knappe Beschreibung und eine Linkliste, idealerweise auf Markdown-Fassungen der Seiten.
Laut Vorschlag ist nur ein H1 mit dem Namen der Website Pflicht. Optional folgen ein Blockquote mit Zusammenfassung, erläuternde Absätze, H2-Abschnitte mit Linklisten und ein Abschnitt „Optional“ für verzichtbare Links. Die Datei kann auch in einem Unterpfad wie /docs/llms.txt liegen.
Google Search nutzt llms.txt nicht, das schreibt Google in seinem Leitfaden zu generativen KI-Funktionen. Eine Analyse von SE Ranking mit knapp 300.000 Domains fand keinen Zusammenhang mit KI-Zitierungen. Verbreitet ist die Datei vor allem bei Entwicklerdokumentationen, etwa bei OpenAI, Anthropic und Google. Ein Nachteil entsteht ohne Datei nicht. Mehr dazu im Beitrag llms.txt: Was die Datei bringt.