Mit Stand 7. Oktober 2026 verfügt Shifter über den größten Pool an aktiven US-IPs, mehr als Oxylabs und Bright Data, und das zu einem Bruchteil der Kosten.Shifter hat jetzt den größten Pool aktiver US-IPs

Benchmarks ansehen

Wer hat eine llms.txt? Wir haben die Top 10.000 Websites überprüft

Wir haben die Top 10.000 Websites im November 2026 auf llms.txt überprüft. 9,3% haben eine echte, die Verbreitung steigt schnell, und diese Websites blockieren KI-Crawler nur selten.

SEO & Suche · Aktualisiert am 16. November 2026 · 6 Min. Lesezeit
Top-10,000-Websites9.3%haben eine echte llms.txt5.9%im Mai 2026
Eine von elf der Top-10,000-Websites hat eine echte llms.txt. Jedes bernstein-Quadrat entspricht etwa 1%.
Wissen
Auf dieser Seite
  1. Die wichtigsten Zahlen
  2. Die Hälfte der „200 OK”-Antworten sind keine llms.txt-Dateien
  3. Größere Websites und Entwickler-Websites führen
  4. Die Überraschung: Websites mit llms.txt blockieren selten KI-Crawler
  5. Liest das überhaupt jemand?
  6. Was damit tun
  7. Wie wir vorgegangen sind
  8. Fazit
  9. Quellen und Referenzen

llms.txt ist die meistdiskutierte Datei im KI-Search, und eine der am wenigsten gemessenen. Es handelt sich um eine Markdown-Datei im Stammverzeichnis einer Website, die KI-Tools mitteilt, worum es auf der Website geht und wo sich ihre nützlichsten Seiten befinden. Viele Leute empfehlen sie; Google sagt, man könne sie ignorieren. Für Teams, die die Sichtbarkeit in der Suche überwachen, ist die nützliche Frage einfacher: Wer hat tatsächlich eine?

Am 16. November 2026 haben wir die Top-10.000-Domains im Tranco-Ranking überprüft, dieselbe Liste, die wir für unsere Studie darüber verwendet haben, wer KI-Crawler blockiert. Hier ist, was wir herausgefunden haben.

Die wichtigsten Zahlen

DomainsAnteil
Geprüfte Top-10.000-Domains10.000
Betreiben eine Website (haben auf unsere Anfrage geantwortet)7.865
Mit einer echten llms.txt9299,3% aller, 11,8% der Websites
Zusätzlich mit einer llms-full.txt15016% derjenigen mit llms.txt

Eine Anbieterauswertung der gleichen Art von Liste im Mai 2026 fand 586 gültige Dateien, 5,86% der Top 10.000. Die Methoden unterscheiden sich leicht, aber die Richtung ist klar: Die Verbreitung stieg in sechs Monaten um etwa die Hälfte.

Die Hälfte der „200 OK”-Antworten sind keine llms.txt-Dateien

2.068 Domains beantworteten unsere Anfrage nach /llms.txt mit einem 200-OK-Status. Weniger als die Hälfte davon, 929, lieferte eine tatsächliche llms.txt. Der Rest lieferte die Startseite zurück, eine als Erfolg getarnte Fehlerseite oder eine Weiterleitung an einen anderen Ort. Wir fanden außerdem 128 einfache Textdateien ohne Titel, den die Spezifikation verlangt.

Das reine Zählen von Statuscodes überschätzt die Verbreitung somit um mehr als das Doppelte. Wir zählten eine Datei nur dann als echt, wenn sie Text war, nicht HTML, nach Weiterleitungen bei einer llms.txt-Adresse blieb und mit dem Markdown-Titel begann, den die Spezifikation als „den einzigen erforderlichen Abschnitt” bezeichnet.

Größere Websites und Entwickler-Websites führen

RangWebsitesMit llms.txt
Top 1007312,3%
Top 1.00073315,8%
1.001 bis 5.0003.04812,4%
5.001 bis 10.0004.08410,7%

Zu den frühesten Anwendern im Ranking gehören Cloudflare, GitHub, Adobe, Samsung, Dropbox, PayPal, Shopify, Stripe, Cisco und Slack. Das Muster sind Entwicklerplattformen und Softwareunternehmen: Websites, deren Dokumentation Leute bereits in KI-Coding-Tools einfügen.

Domain-Endungen erzählen dieselbe Geschichte. 25,7% der .io-Websites haben eine llms.txt, und 15,4% der .com-Websites, gegenüber 2,5% der .edu-, 1,8% der .jp- und 1,0% der .gov-Websites. Doku-Plattformen erklären einen Teil davon: Mintlify generiert seit Ende 2024 llms.txt für die von ihm gehosteten Doku-Websites, und Yoast SEO hat sie im Juni 2025 für WordPress hinzugefügt.

Die Überraschung: Websites mit llms.txt blockieren selten KI-Crawler

Wir haben die Ergebnisse mit den robots.txt-Dateien aus unserer Oktober-Studie zusammengeführt. Die beiden Gruppen sehen sehr unterschiedlich aus.

KI-Crawler in robots.txt blockiertWebsites mit llms.txtWebsites ohne
GPTBot (OpenAI)4,9%16,9%
ClaudeBot (Anthropic)4,2%15,7%
Google-Extended3,0%13,8%
CCBot (Common Crawl)6,5%18,0%
Mindestens ein Trainings-Crawler7,4%20,7%

Websites, die eine llms.txt veröffentlichen, blockieren etwa dreimal seltener KI-Trainings-Crawler. Das ergibt Sinn: Eine llms.txt ist eine Einladung, und die Unternehmen, die sie versenden, wollen überwiegend, dass KI-Tools ihre Produkte verstehen.

Einige Websites senden widersprüchliche Signale. Zwölf veröffentlichen eine llms.txt, während sie GPTBot, ClaudeBot und PerplexityBot in robots.txt blockieren, darunter Bloomberg und die Daily Mail. Die robots.txt-Daten stammen von Anfang Oktober, es ist also möglich, dass sich einiges seitdem geändert hat, aber der Punkt bleibt bestehen: Eine llms.txt listet Inhalte auf, sie erteilt keine Erlaubnis. Unser Leitfaden zu robots.txt und KI-Opt-outs behandelt die Dateien, die das tun.

Liest das überhaupt jemand?

Hier ist das Bild schwächer, als die Adoptionskurve vermuten lässt.

  • Google Search nutzt sie nicht. Googles Leitfaden zu KI-Funktionen sagt, man könne „Taktiken wie ‘Chunking’ von Inhalten oder das Erstellen unnötiger KI-Textdateien (wie llms.txt)” ignorieren, merkt jedoch an, dass es „völlig in Ordnung” sei, sie für andere Dienste zu erstellen, die sie nutzen. Früher verglich John Mueller llms.txt mit dem Keywords-Meta-Tag.
  • Chrome prüft darauf. Lighthouse hat nun einen llms.txt-Audit, der sie als „eine aufkommende Konvention zur Bereitstellung einer maschinenlesbaren Zusammenfassung der Inhalte einer Website” beschreibt. Eine fehlende Datei wird als nicht zutreffend markiert, „da die Bereitstellung der Datei derzeit optional ist”.
  • Crawler rufen sie selten ab. Kein größeres KI-Unternehmen dokumentiert, dass seine Crawler die llms.txt-Dateien anderer Websites lesen. In der Log-Studie von Ahrefs erhielten 97% von etwa 38.000 Dateien im Mai 2026 überhaupt keine Anfragen.

Die Hauptleser heute sind KI-Coding-Assistenten und Agenten, die auf Dokumentation gerichtet sind, wo eine saubere Liste von Seiten wirklich nützlich ist.

Was damit tun

  1. Fügen Sie eine hinzu, wenn Sie Dokumentation oder ein Produkt mit vielen Seiten haben. Es ist günstig, und Agenten und Coding-Tools nutzen sie tatsächlich. Halten Sie sie kurz: einen Titel, eine einzeilige Zusammenfassung und Abschnitte mit Links zu Ihren nützlichsten Seiten.
  2. Erwarten Sie keine Rankings. Nichts deutet darauf hin, dass llms.txt die Google-Suche oder AI Overviews beeinflusst. Unser Leitfaden zu AI Mode und Rank-Tracking behandelt, was tatsächlich die KI-Sichtbarkeit beeinflusst, und Residential Proxies lassen Sie prüfen, wie KI-Antworten Sie in jedem Markt beschreiben.
  3. Machen Sie sie echt. Liefern Sie reinen Text unter /llms.txt, nicht Ihre Startseite, und prüfen Sie nach jedem CMS-Update. Mehr als die Hälfte der „200 OK”-Antworten, die wir sahen, waren keine llms.txt-Dateien.
  4. Halten Sie die Signale konsistent. Wenn Ihre llms.txt KI-Tools einlädt, Ihre Seiten zu lesen, prüfen Sie, ob robots.txt dieselben Tools nicht aussperrt, oder umgekehrt.
  5. Messen, dann entscheiden. Beobachten Sie Ihre Server-Logs auf Anfragen an /llms.txt. Wenn sie nach einigen Monaten niemand abruft, haben Sie Ihre Antwort.

Wie wir vorgegangen sind

Am 16. November 2026 haben wir https://<domain>/llms.txt angefragt, dann die www.-Adresse, falls die erste fehlschlug, für jede der Top-10.000-Domains im Tranco-Ranking (Liste Q2K34). Wir verwendeten eine Anfrage pro Adresse mit einem beschreibenden User-Agent, folgten Weiterleitungen und lasen höchstens 2 MB. Eine Domain zählte als Website-Betreiber, wenn sie irgendeine HTTP-Antwort zurückgab. Eine Datei zählte als echte llms.txt, wenn sie kein HTML war, bei einer llms.txt-Adresse blieb und mit einem Markdown-Titel begann. Der robots.txt-Vergleich nutzt unseren Scan derselben Domains vom 6. Oktober 2026.

Fazit

Etwa eine von elf der Top-10.000-Websites hat inzwischen eine echte llms.txt, ein Anstieg um etwa die Hälfte seit Mai, angeführt von Entwicklerplattformen und den größten Websites. Diese Websites blockieren dreimal seltener KI-Crawler. Aber die Google-Suche ignoriert die Datei, und Crawler rufen sie selten ab, also behandeln Sie llms.txt als günstige Annehmlichkeit für KI-Tools und Agenten, nicht als SEO-Hebel.

Quellen und Referenzen

Häufig gestellte Fragen

Wie viele Websites haben eine llms.txt-Datei?

In unserer Überprüfung der Top 10.000 Domains im Tranco-Ranking im November 2026 hatten 929 eine echte llms.txt: 9,3% aller Domains und 11,8% derjenigen, die eine Website betreiben. Unter den Top 1.000 lag der Anteil bei 15,8%.

Nutzt Google llms.txt?

Nicht für die Suche. Googles Leitfaden zu KI-Funktionen besagt, dass man Taktiken wie das Erstellen unnötiger KI-Textdateien wie llms.txt ignorieren kann, fügt aber hinzu, dass es völlig in Ordnung ist, sie für andere Dienste zu erstellen, die sie nutzen. Chromes Lighthouse enthält tatsächlich eine llms.txt-Prüfung, die als nicht zutreffend markiert wird, wenn die Datei fehlt.

Lesen KI-Crawler llms.txt?

Bisher selten. Kein großes KI-Unternehmen dokumentiert, dass seine Crawler die llms.txt-Dateien anderer Websites lesen, und eine Ahrefs-Log-Studie ergab, dass 97% von etwa 38.000 llms.txt-Dateien im Mai 2026 überhaupt keine Anfragen erhielten.

Sollte meine Website eine llms.txt haben?

Es kostet wenig und kann KI-Agenten und Coding-Tools helfen, Ihre wichtigsten Seiten zu finden, weshalb Dokumentationsseiten bei der Einführung führend sind. Erwarten Sie nicht, dass es das Ranking bei Google beeinflusst, und verwenden Sie es nicht anstelle von robots.txt: Es listet Inhalte auf, es erteilt oder verweigert keine Berechtigung.

Bereit, loszulegen?

Testen Sie Shifters Residential-Proxys, 205M+ IPs, 195+ Länder, ab 0,75 $/GB.

Jetzt starten