Glossar / Begriff
llms.txt
llms.txt ist ein Vorschlag für eine Markdown-Datei im Stammverzeichnis einer Website, die Sprachmodellen eine knappe Übersicht über das Angebot und Verweise auf die wichtigsten, maschinenfreundlich aufbereiteten Inhalte gibt.
Den Vorschlag hat Jeremy Howard, Mitgründer von Answer.AI, am 3. September 2024 veröffentlicht. Die Beschreibung steht auf llmstxt.org. Es handelt sich um eine offene Anregung, nicht um einen Standard einer Normungsorganisation.
Die Idee
Websites sind für Menschen gebaut: mit Navigation, Skripten, Werbung und Layout. Ein Sprachmodell, das eine Seite zur Beantwortung einer Frage liest, muss den eigentlichen Inhalt erst aus diesem Umfeld herauslösen, und sein Kontextfenster ist begrenzt. llms.txt schlägt vor, an fester Stelle, unter /llms.txt, eine kurze, klar gegliederte Fassung bereitzustellen.
Aufbau nach dem Vorschlag
Die Datei ist in Markdown geschrieben und folgt einer festen Reihenfolge:
- eine Überschrift erster Ebene mit dem Namen des Projekts oder Unternehmens, als einziger Pflichtteil;
- ein Zitatblock mit einer kurzen Zusammenfassung;
- optional weitere Absätze mit Hintergrund;
- Abschnitte mit Überschriften zweiter Ebene, die Listen von Links mit kurzer Beschreibung enthalten;
- optional ein Abschnitt «Optional» für Inhalte, die bei knappem Kontext weggelassen werden können.
Ergänzend regt der Vorschlag an, zu Seiten eine reine Textfassung unter derselben Adresse mit angehängtem .md anzubieten. Verbreitet ist auch eine zusätzliche Datei llms-full.txt mit dem vollständigen Inhalt; sie ist nicht Teil des ursprünglichen Kernvorschlags, wird aber häufig zusammen damit eingesetzt.
Abgrenzung zu robots.txt und sitemap.xml
robots.txt sagt Crawlern, was sie abrufen dürfen. sitemap.xml listet alle Adressen, die indexiert werden sollen. llms.txt tut beides nicht: Sie erteilt keine Rechte und ist nicht vollständig, sondern kuratiert. Sie ist eine Lesehilfe.
Was die Datei bewirkt und was nicht
Ob und wie die grossen Anbieter von Sprachmodellen llms.txt für ihre Antworten auswerten, ist nach unserem Kenntnisstand nicht verbindlich dokumentiert. Belegbar ist der Nutzen dort, wo ein Agent oder eine Entwicklerin eine Website gezielt liest, etwa in Programmierwerkzeugen. Wer eine Verbesserung der KI-Sichtbarkeit allein durch llms.txt verspricht, verspricht mehr, als sich derzeit belegen lässt.
Was das für ein Schweizer Unternehmen bedeutet
Für ein Schweizer Unternehmen ist llms.txt eine kleine, günstige Massnahme mit geringem Risiko: Sie zwingt dazu, das eigene Angebot in wenigen Sätzen zu fassen und die wichtigsten Seiten zu benennen. Sie ersetzt aber weder gute Inhalte auf der Website noch konsistente Firmendaten in Verzeichnissen und Wissensdatenbanken.