llms.txt
Die llms.txt ist eine vorgeschlagene Textdatei im Hauptverzeichnis einer Website, die Sprachmodellen eine kompakte Übersicht der wichtigsten Inhalte gibt, meist als Liste von Links mit kurzen Beschreibungen im Markdown-Format. Der Vorschlag stammt von Jeremy Howard und wurde im September 2024 veröffentlicht.
Die llms.txt ist kein offizieller Standard. Ob und wie KI-Systeme sie nutzen, entscheidet jeder Anbieter selbst.
Warum das für euch zählt
Viele Unternehmen fragen sich, ob sie eine llms.txt brauchen, um in KI-Antworten zu erscheinen. Für die Google-Suche lautet die Antwort nein: Google nutzt die Datei nach eigener Aussage nicht für seine KI-Funktionen. Wer Aufwand priorisieren muss, investiert besser in klare Inhalte und saubere Indexierung.
Einordnung
Die Idee orientiert sich an bekannten Dateien wie robots.txt und Sitemap. Während robots.txt Crawlern Zugriffsregeln gibt und die Sitemap alle URLs auflistet, soll die llms.txt Sprachmodellen helfen, die wichtigsten Inhalte schnell zu verstehen, ohne komplexe Seiten verarbeiten zu müssen.
In der Praxis nutzen vor allem Entwicklerdokumentationen die Datei, damit Programmierwerkzeuge mit KI die Dokumentation leichter lesen. Für Marketing-Websites ist der Nutzen bisher unklar.
Wie ist eine llms.txt aufgebaut?
Der Vorschlag sieht ein einfaches Markdown-Format vor:
- eine Überschrift mit dem Namen der Website
- eine kurze Beschreibung in einem Satz
- Abschnitte mit Listen wichtiger Seiten, jeweils mit Link und kurzer Erklärung
Optional gibt es eine ausführliche Variante mit dem vollständigen Text der wichtigsten Seiten.
Wann lohnt sich eine llms.txt?
Die Datei kann sinnvoll sein, wenn:
- ihr umfangreiche technische Dokumentation habt, die Entwickler mit KI-Werkzeugen lesen
- ein bestimmter KI-Dienst die Datei nachweislich nutzt
- der Aufwand gering ist, weil sie automatisch erzeugt wird
Als Ersatz für Indexierung, klare Inhalte und Verlinkung taugt sie nicht.
Ein Softwareanbieter stellt für seine Entwicklerdokumentation eine llms.txt bereit, damit Programmierassistenten die Schnittstellenbeschreibung schneller finden. Für seine Marketing-Website verzichtet er darauf und konzentriert sich auf Indexierung und klare Antworten.
Typische Fehler
- llms.txt als Ranking-Hebel sehen: Für die Google-Suche hat die Datei laut Google keine Wirkung.
- Mit robots.txt verwechseln: Die llms.txt regelt keinen Zugriff, sie beschreibt nur Inhalte.
- Aufwand falsch verteilen: Klare Inhalte und Indexierung wirken stärker als jede Zusatzdatei.
Häufige Fragen
Was ist eine llms.txt?
Eine Textdatei im Hauptverzeichnis einer Website, die Sprachmodellen die wichtigsten Inhalte als kompakte Liste mit Links und Beschreibungen anbietet.
Braucht meine Website eine llms.txt?
Für die Google-Suche nicht, Google nutzt sie nach eigener Aussage nicht. Für Entwicklerdokumentationen kann sie sinnvoll sein, weil Programmierwerkzeuge sie teilweise auslesen.
Was ist der Unterschied zwischen llms.txt und robots.txt?
Die robots.txt legt fest, welche Bereiche Crawler besuchen dürfen. Die llms.txt beschreibt Inhalte für Sprachmodelle, regelt aber keinen Zugriff.
