llms.txt ist die meistdiskutierte Datei im KI-Search, und eine der am wenigsten gemessenen. Es handelt sich um eine Markdown-Datei im Stammverzeichnis einer Website, die KI-Tools mitteilt, worum es auf der Website geht und wo sich ihre nützlichsten Seiten befinden. Viele Leute empfehlen sie; Google sagt, man könne sie ignorieren. Für Teams, die die Sichtbarkeit in der Suche überwachen, ist die nützliche Frage einfacher: Wer hat tatsächlich eine?
Am 16. November 2026 haben wir die Top-10.000-Domains im Tranco-Ranking überprüft, dieselbe Liste, die wir für unsere Studie darüber verwendet haben, wer KI-Crawler blockiert. Hier ist, was wir herausgefunden haben.
Die wichtigsten Zahlen
| Domains | Anteil | |
|---|---|---|
| Geprüfte Top-10.000-Domains | 10.000 | |
| Betreiben eine Website (haben auf unsere Anfrage geantwortet) | 7.865 | |
| Mit einer echten llms.txt | 929 | 9,3% aller, 11,8% der Websites |
| Zusätzlich mit einer llms-full.txt | 150 | 16% derjenigen mit llms.txt |
Eine Anbieterauswertung der gleichen Art von Liste im Mai 2026 fand 586 gültige Dateien, 5,86% der Top 10.000. Die Methoden unterscheiden sich leicht, aber die Richtung ist klar: Die Verbreitung stieg in sechs Monaten um etwa die Hälfte.
Die Hälfte der „200 OK”-Antworten sind keine llms.txt-Dateien
2.068 Domains beantworteten unsere Anfrage nach /llms.txt mit einem 200-OK-Status. Weniger als die Hälfte davon, 929, lieferte eine tatsächliche llms.txt. Der Rest lieferte die Startseite zurück, eine als Erfolg getarnte Fehlerseite oder eine Weiterleitung an einen anderen Ort. Wir fanden außerdem 128 einfache Textdateien ohne Titel, den die Spezifikation verlangt.
Das reine Zählen von Statuscodes überschätzt die Verbreitung somit um mehr als das Doppelte. Wir zählten eine Datei nur dann als echt, wenn sie Text war, nicht HTML, nach Weiterleitungen bei einer llms.txt-Adresse blieb und mit dem Markdown-Titel begann, den die Spezifikation als „den einzigen erforderlichen Abschnitt” bezeichnet.
Größere Websites und Entwickler-Websites führen
| Rang | Websites | Mit llms.txt |
|---|---|---|
| Top 100 | 73 | 12,3% |
| Top 1.000 | 733 | 15,8% |
| 1.001 bis 5.000 | 3.048 | 12,4% |
| 5.001 bis 10.000 | 4.084 | 10,7% |
Zu den frühesten Anwendern im Ranking gehören Cloudflare, GitHub, Adobe, Samsung, Dropbox, PayPal, Shopify, Stripe, Cisco und Slack. Das Muster sind Entwicklerplattformen und Softwareunternehmen: Websites, deren Dokumentation Leute bereits in KI-Coding-Tools einfügen.
Domain-Endungen erzählen dieselbe Geschichte. 25,7% der .io-Websites haben eine llms.txt, und 15,4% der .com-Websites, gegenüber 2,5% der .edu-, 1,8% der .jp- und 1,0% der .gov-Websites. Doku-Plattformen erklären einen Teil davon: Mintlify generiert seit Ende 2024 llms.txt für die von ihm gehosteten Doku-Websites, und Yoast SEO hat sie im Juni 2025 für WordPress hinzugefügt.
Die Überraschung: Websites mit llms.txt blockieren selten KI-Crawler
Wir haben die Ergebnisse mit den robots.txt-Dateien aus unserer Oktober-Studie zusammengeführt. Die beiden Gruppen sehen sehr unterschiedlich aus.
| KI-Crawler in robots.txt blockiert | Websites mit llms.txt | Websites ohne |
|---|---|---|
| GPTBot (OpenAI) | 4,9% | 16,9% |
| ClaudeBot (Anthropic) | 4,2% | 15,7% |
| Google-Extended | 3,0% | 13,8% |
| CCBot (Common Crawl) | 6,5% | 18,0% |
| Mindestens ein Trainings-Crawler | 7,4% | 20,7% |
Websites, die eine llms.txt veröffentlichen, blockieren etwa dreimal seltener KI-Trainings-Crawler. Das ergibt Sinn: Eine llms.txt ist eine Einladung, und die Unternehmen, die sie versenden, wollen überwiegend, dass KI-Tools ihre Produkte verstehen.
Einige Websites senden widersprüchliche Signale. Zwölf veröffentlichen eine llms.txt, während sie GPTBot, ClaudeBot und PerplexityBot in robots.txt blockieren, darunter Bloomberg und die Daily Mail. Die robots.txt-Daten stammen von Anfang Oktober, es ist also möglich, dass sich einiges seitdem geändert hat, aber der Punkt bleibt bestehen: Eine llms.txt listet Inhalte auf, sie erteilt keine Erlaubnis. Unser Leitfaden zu robots.txt und KI-Opt-outs behandelt die Dateien, die das tun.
Liest das überhaupt jemand?
Hier ist das Bild schwächer, als die Adoptionskurve vermuten lässt.
- Google Search nutzt sie nicht. Googles Leitfaden zu KI-Funktionen sagt, man könne „Taktiken wie ‘Chunking’ von Inhalten oder das Erstellen unnötiger KI-Textdateien (wie llms.txt)” ignorieren, merkt jedoch an, dass es „völlig in Ordnung” sei, sie für andere Dienste zu erstellen, die sie nutzen. Früher verglich John Mueller llms.txt mit dem Keywords-Meta-Tag.
- Chrome prüft darauf. Lighthouse hat nun einen llms.txt-Audit, der sie als „eine aufkommende Konvention zur Bereitstellung einer maschinenlesbaren Zusammenfassung der Inhalte einer Website” beschreibt. Eine fehlende Datei wird als nicht zutreffend markiert, „da die Bereitstellung der Datei derzeit optional ist”.
- Crawler rufen sie selten ab. Kein größeres KI-Unternehmen dokumentiert, dass seine Crawler die llms.txt-Dateien anderer Websites lesen. In der Log-Studie von Ahrefs erhielten 97% von etwa 38.000 Dateien im Mai 2026 überhaupt keine Anfragen.
Die Hauptleser heute sind KI-Coding-Assistenten und Agenten, die auf Dokumentation gerichtet sind, wo eine saubere Liste von Seiten wirklich nützlich ist.
Was damit tun
- Fügen Sie eine hinzu, wenn Sie Dokumentation oder ein Produkt mit vielen Seiten haben. Es ist günstig, und Agenten und Coding-Tools nutzen sie tatsächlich. Halten Sie sie kurz: einen Titel, eine einzeilige Zusammenfassung und Abschnitte mit Links zu Ihren nützlichsten Seiten.
- Erwarten Sie keine Rankings. Nichts deutet darauf hin, dass llms.txt die Google-Suche oder AI Overviews beeinflusst. Unser Leitfaden zu AI Mode und Rank-Tracking behandelt, was tatsächlich die KI-Sichtbarkeit beeinflusst, und Residential Proxies lassen Sie prüfen, wie KI-Antworten Sie in jedem Markt beschreiben.
- Machen Sie sie echt. Liefern Sie reinen Text unter
/llms.txt, nicht Ihre Startseite, und prüfen Sie nach jedem CMS-Update. Mehr als die Hälfte der „200 OK”-Antworten, die wir sahen, waren keine llms.txt-Dateien. - Halten Sie die Signale konsistent. Wenn Ihre llms.txt KI-Tools einlädt, Ihre Seiten zu lesen, prüfen Sie, ob robots.txt dieselben Tools nicht aussperrt, oder umgekehrt.
- Messen, dann entscheiden. Beobachten Sie Ihre Server-Logs auf Anfragen an
/llms.txt. Wenn sie nach einigen Monaten niemand abruft, haben Sie Ihre Antwort.
Wie wir vorgegangen sind
Am 16. November 2026 haben wir https://<domain>/llms.txt angefragt, dann die www.-Adresse, falls die erste fehlschlug, für jede der Top-10.000-Domains im Tranco-Ranking (Liste Q2K34). Wir verwendeten eine Anfrage pro Adresse mit einem beschreibenden User-Agent, folgten Weiterleitungen und lasen höchstens 2 MB. Eine Domain zählte als Website-Betreiber, wenn sie irgendeine HTTP-Antwort zurückgab. Eine Datei zählte als echte llms.txt, wenn sie kein HTML war, bei einer llms.txt-Adresse blieb und mit einem Markdown-Titel begann. Der robots.txt-Vergleich nutzt unseren Scan derselben Domains vom 6. Oktober 2026.
Fazit
Etwa eine von elf der Top-10.000-Websites hat inzwischen eine echte llms.txt, ein Anstieg um etwa die Hälfte seit Mai, angeführt von Entwicklerplattformen und den größten Websites. Diese Websites blockieren dreimal seltener KI-Crawler. Aber die Google-Suche ignoriert die Datei, und Crawler rufen sie selten ab, also behandeln Sie llms.txt als günstige Annehmlichkeit für KI-Tools und Agenten, nicht als SEO-Hebel.
Quellen und Referenzen
- llms.txt-Vorschlag und Spezifikation: llmstxt.org
- Google Search Central, Optimierung für KI-Funktionen in der Suche: developers.google.com
- Chrome Lighthouse, llms.txt-Audit: developer.chrome.com
- Search Engine Journal, Google sagt, llms.txt sei vergleichbar mit dem Keywords-Meta-Tag (17. April 2025): searchenginejournal.com
- Ahrefs, llms.txt-Log-Studie: ahrefs.com
- Thunderbit, llms.txt-Verbreitung in den Tranco-Top-10.000 (Mai 2026): thunderbit.com
- Common Crawl, Inhaltsanalyse von llms.txt-Dateien (31. August 2026): commoncrawl.org
- Mintlify, llms.txt-Unterstützung (20. November 2024): mintlify.com
- Yoast SEO 25.3 Release (10. Juni 2025): yoast.com
- Tranco, Liste Q2K34: tranco-list.eu