Simon Gläve in Schwarzweiß neben der Schlagzeile „llms.txt: Wer die Datei liest und wer sie ignoriert“

Yoast legt eine llms.txt mit einem Klick an, und manche Anbieter verkaufen die Datei als Voraussetzung für Sichtbarkeit in ChatGPT und Perplexity. Bevor du sie einschaltest, gehört eine nüchterne Frage geklärt: Welcher Anbieter liest die Datei nachweislich, und wo steuerst du den Zugang der KI-Crawler tatsächlich?

Das Wichtigste in Kürze

Der Stand beim Abruf der Quellen am 28.09.2026:

  • Ein Vorschlag, kein Standard. Jeremy Howard hat die llms.txt 2024 auf llmstxt.org vorgeschlagen: eine Markdown-Datei im Stammverzeichnis, die Sprachmodellen die wichtigsten Seiten einer Website zeigt.
  • Google Search ignoriert sie. Laut Google Search Central nutzt die Google-Suche solche Dateien nicht; sie schaden der Sichtbarkeit nicht und helfen ihr nicht. Chromes Prüfwerkzeug Lighthouse fragt die Datei in einer experimentellen Kategorie trotzdem ab.
  • OpenAI, Anthropic und Perplexity holen sie selten ab. In einer Studie von EZY Research, einem Anbieter, der selbst ein Werkzeug für beide Dateien verkauft, rief OpenAIs GPTBot-Familie auf 83 Websites in 12 Wochen (April bis Juli 2026) die llms.txt 7-mal ab, die robots.txt 3.990-mal. Nur Metas Crawler holte die llms.txt öfter als die robots.txt. Das Panel bestand überwiegend aus Websites kleiner Unternehmen, ein Land nennt die Studie nicht.
  • Der Zugang läuft über die robots.txt. OpenAI, Anthropic, Perplexity und Google dokumentieren ihre Crawler-Namen für die robots.txt. Abrufe, die ein Nutzer im Chat auslöst, halten sich laut Dokumentation bei OpenAI womöglich nicht daran, bei Perplexity in der Regel nicht.
  • Aufwand klein, Nutzen unbelegt. Yoast erzeugt die Datei kostenlos und aktualisiert sie wöchentlich. Einen belegten Gewinn an Sichtbarkeit habe ich in keiner Primärquelle gefunden.

Wer die Datei anlegt, sollte deshalb messen, ob sie jemand abruft, und die eigentliche Zugangsfrage in der robots.txt klären.

Die llms.txt zeigt Sprachmodellen eine ausgewählte Karte deiner Website

Das Interesse an der Datei hat einen Grund. In einer Befragung von Appinio für Claneo nannten 21 Prozent von 1.000 Befragten ab 16 Jahren in Deutschland „ChatGPT, Deep Seek o. Ä.“ als Plattform, die sie hauptsächlich für die Suche nach Informationen nutzen, 10 Prozent „Perplexity, you.com o. Ä.“ (Statista nach Claneo, April 2025). Google, Bing und Ähnliche lagen bei 67 Prozent. Die Anteile ergeben zusammen mehr als 100 Prozent, Befragte konnten also mehrere Plattformen nennen.

Die llms.txt ist eine Textdatei im Markdown-Format, die im Stammverzeichnis einer Website liegt und einem Sprachmodell knapp sagt, worum es auf der Seite geht und welche Unterseiten es lesen sollte. Jeremy Howard hat sie im September 2024 vorgeschlagen. Die Projektseite llmstxt.org führt den Text inzwischen als Version 2.

Pflicht ist nach dem Vorschlag nur eine H1 mit dem Namen der Website. Darunter folgen auf Wunsch eine Zusammenfassung als Zitatblock und Abschnitte mit H2-Überschriften, die Linklisten enthalten. Ein Abschnitt namens „Optional“ sammelt Nebensächliches, das ein Agent bei knappem Platz überspringen darf. Dazu empfiehlt Howard, wichtige Seiten zusätzlich als bereinigte Markdown-Fassung unter derselben Adresse mit angehängtem .md anzubieten.

Howards Begründung: HTML-Seiten sind für Menschen gebaut, mit Navigation, Werbung und JavaScript, und ein Modell gewinnt daraus nur mühsam sauberen Text. Die Abgrenzung zieht der Vorschlag selbst. Die robots.txt regelt, welcher Zugriff erlaubt ist, die llms.txt wird bei Bedarf gelesen, wenn ein Agent für einen Nutzer etwas sucht. Sie sperrt nichts.

Google Search ignoriert die Datei, Chrome prüft sie trotzdem

Im Beitrag zur GEO-Optimierung für zitierfähige Inhalte habe ich festgehalten, dass Google für seine KI-Funktionen keine Zusatzdateien verlangt. Inzwischen nennt Google die llms.txt beim Namen. Im Leitfaden zur Optimierung für generative KI-Funktionen steht sie im Abschnitt über Dinge, die du für die KI-Suche von Google nicht tun musst.

Wer eine llms.txt für andere Dienste pflegt, darf das tun. Laut Google verschlechtert oder verbessert das die Sichtbarkeit in der Suche nicht, weil die Suche solche Dateien ignoriert. Google ergänzt, dass der eigene Crawler viele Dateitypen findet und abruft, ohne sie deshalb besonders zu behandeln.

Wie Googlebot deine Seiten tatsächlich findet, über Links und Sitemap, steht im Beitrag zur Website-Struktur.

Das deckt sich mit Serverprotokollen, also den Aufzeichnungen deines Servers über jeden Abruf. In der Studie von EZY Research holte Googlebot die llms.txt auf 83 Websites binnen 12 Wochen 67-mal ab, die robots.txt 5.125-mal. Ein Abruf beweist keine Auswertung.

Anders klingt die Chrome-Seite des Hauses. Das Prüfwerkzeug Lighthouse hat eine Kategorie „Agentic Browsing“, die laut Chrome-Dokumentation Chrome 150 oder neuer voraussetzt und ausdrücklich experimentell ist. Eine ihrer Prüfungen fragt nach der llms.txt. Fehlt die Datei, zeigt Lighthouse „nicht zutreffend“, weil sie derzeit optional sei; durchfallen lässt die llms.txt-Prüfung eine Seite nur bei einem Serverfehler beim Abruf.

Zwei Google-Produkte, zwei Zwecke. Ein grüner Haken in Lighthouse sagt nichts über deinen Platz in der Google-Suche.

OpenAI, Anthropic und Perplexity holen die robots.txt, kaum die llms.txt

OpenAI, Anthropic und Perplexity stellen für ihre eigenen Entwicklerdokumentationen eine llms.txt bereit. In den Hilfeseiten zu ihren Crawlern, also den Programmen, die Webseiten automatisch abrufen, beschreibt keiner der drei, dass er die llms.txt fremder Websites auswertet. Die Messwerte passen dazu.

Die genaueste Messung, die ich gefunden habe, stammt von EZY Research. Die Firma verkauft selbst ein Werkzeug, das llms.txt und robots.txt mit einem Klick erzeugt, und empfiehlt die Datei am Ende der Studie als günstige Absicherung. Ein Interesse an schlechten Zahlen für die llms.txt erkenne ich darin nicht.

EZY hat vom 27. April bis 19. Juli 2026 die Serverprotokolle von 83 Websites ausgewertet und nennt dabei kein Land. OpenAIs GPTBot-Familie rief die robots.txt 3.990-mal ab, die llms.txt 7-mal. Bei Anthropics ClaudeBot standen 3.120 zu 9 Abrufen, bei PerplexityBot 775 zu 0.

Die Ausnahme war Meta. Dessen Crawler Meta-ExternalAgent holte die llms.txt 193-mal, die robots.txt 172-mal. Die Studie benennt ihre Schlagseite selbst: Das Panel besteht überwiegend aus Websites kleiner Unternehmen, deren Inhaber ein Werkzeug für KI-Sichtbarkeit gesucht hatten. Für kleine Firmenseiten halte ich das trotzdem für einen brauchbaren Vergleich.

Wer den Zugang der KI-Anbieter steuern will, braucht die Crawler-Namen aus deren eigener Dokumentation:

  • OpenAI. GPTBot sammelt Inhalte, die ins Training der Modelle fließen können; OAI-SearchBot sorgt dafür, dass Seiten in der Suche von ChatGPT erscheinen. Für ChatGPT-User, den Abruf auf Nutzerwunsch, gelten robots.txt-Regeln laut OpenAI womöglich nicht. Bis eine Änderung an der robots.txt in der ChatGPT-Suche greift, kann es etwa 24 Stunden dauern.
  • Anthropic. ClaudeBot sammelt Inhalte für das Training, Claude-SearchBot arbeitet für die Suchergebnisse, Claude-User ruft Seiten auf, wenn ein Nutzer im Chat fragt. Anthropic sagt zu, robots.txt-Anweisungen einzuhalten, und unterstützt die nicht genormte Anweisung Crawl-delay.
  • Perplexity. PerplexityBot listet Seiten in den Suchergebnissen und dient laut Perplexity nicht dem Modelltraining. Perplexity-User ruft Seiten im Auftrag eines Nutzers ab und ignoriert robots.txt-Regeln laut Perplexity-Dokumentation in der Regel.
  • Google. Mit dem Token Google-Extended legst du fest, ob Google deine Inhalte für das Training künftiger Gemini-Modelle nutzt, die hinter den Gemini-Apps und der Vertex AI API stehen, und für die Faktenstützung dieser Dienste. Laut Googles Crawler-Liste berührt das weder die Aufnahme in die Google-Suche noch das Ranking.

Die Trennung zwischen Training und Suche ziehst du also in der robots.txt, und die llms.txt ändert daran nichts.

Mit Yoast ist die llms.txt schnell angelegt, der Nutzen braucht eine Messung

Wer WordPress mit Yoast SEO betreibt, braucht für die Datei keinen Entwickler. Yoast bietet die Funktion laut Herstellerseite in allen Fassungen kostenlos an. Nach der technischen Beschreibung legt sie eine echte Datei im Stammverzeichnis an und aktualisiert sie wöchentlich über eine geplante Aufgabe. Hinein kommen unter anderem die fünf zuletzt aktualisierten Beiträge oder Seiten, sofern sie in den vergangenen zwölf Monaten veröffentlicht wurden, bevorzugt als Cornerstone markierte Inhalte, und die fünf Kategorien oder Schlagwörter mit den meisten Beiträgen.

Eine vorhandene llms.txt überschreibt Yoast nicht. Für Multisite-Installationen gibt es die Funktion laut Yoast-Hilfe nicht.

In dieser Reihenfolge würde ich eine llms.txt angehen, damit sie nicht die wichtigere Arbeit verdrängt:

  1. Zuerst die robots.txt klären. Entscheide, ob Trainings-Crawler wie GPTBot, ClaudeBot und Google-Extended deine Inhalte bekommen sollen und ob Such-Crawler wie OAI-SearchBot, Claude-SearchBot und PerplexityBot frei zugreifen dürfen.
  2. Die Datei knapp halten. Eine H1 mit dem Firmennamen, ein Satz Zusammenfassung, darunter Leistungsseiten und Kontakt. Eine Datei, die jede Unterseite auflistet, verfehlt den Zweck einer Kurzübersicht.
  3. Automatik oder Handarbeit wählen. Die Yoast-Automatik wählt nach Aktualität aus. Für eine kleine Firmenseite passt oft eine eigene Auswahl besser; dafür bietet Yoast einen manuellen Modus.
  4. Abrufe in den Serverprotokollen zählen. Filtere die Zugriffsprotokolle deines Hosters nach „llms.txt“ und nach den Crawler-Namen. So siehst du, wer die Datei holt, statt es zu vermuten.
  5. Nach drei Monaten neu entscheiden. Holt nach einem Quartal kein Anbieter, der dir Anfragen bringen könnte, die Datei ab, gehört die Zeit in bessere Seiten.

Wenn du robots.txt und Protokollauswertung nicht selbst übernehmen willst, lässt sich beides im Rahmen einer laufenden SEO-Betreuung erledigen.

Meine Notiz: Ich würde die llms.txt nur mit Protokollprüfung anlegen

Was hier folgt, ist meine Einschätzung. Auf simonglaeve.de liegt Stand Ende September 2026 keine llms.txt. Verteufeln würde ich die Datei trotzdem nicht. Mit Yoast kostet sie Minuten, und Google schreibt ausdrücklich, dass sie der Suche nicht schadet.

Mein Einwand gilt dem Verkauf. Wer eine llms.txt als Maßnahme für KI-Sichtbarkeit abrechnet, verkauft eine Wirkung, die bisher niemand belegt hat. Einen Nutzen erwarte ich eher dort, wo Menschen mit KI-Assistenten Software-Dokumentation oder umfangreiche Produktdaten durchsuchen. Für einen Handwerksbetrieb aus Schaumburg mit einer Handvoll Seiten rechne ich mit keinem messbaren Effekt.

Würde ich die Datei bei einem Kunden anlegen, dann nur mit zwei festen Messgrößen: Abrufe durch bekannte KI-Crawler in den Serverprotokollen und Anfragen, die nachweislich über ChatGPT oder Perplexity kamen. Im GEO-Beitrag habe ich einen eigenen Quellenfehler offen korrigiert. Mit demselben Maßstab lese ich die Versprechen rund um diese Datei.

Häufige Fragen

Liest ChatGPT die llms.txt meiner Website?

OpenAI beschreibt in der Dokumentation seiner Crawler keine Auswertung fremder llms.txt-Dateien. Ob ChatGPT sie bei einem Abruf auf Nutzerwunsch im Einzelfall liest, ist nicht dokumentiert.

Schadet eine llms.txt meinem Google-Ranking?

Nein. Google Search Central schreibt, dass eine llms.txt die Sichtbarkeit in der Google-Suche weder verschlechtert noch verbessert, weil die Suche solche Dateien ignoriert.

Wie erstelle ich eine llms.txt in WordPress?

Mit Yoast SEO schaltest du die Funktion in den Yoast-Einstellungen unter den Website-Funktionen im Bereich der KI-Werkzeuge ein. Yoast legt die Datei dann im Stammverzeichnis an und aktualisiert sie wöchentlich. Ohne Yoast schreibst du eine Markdown-Datei nach dem Muster von llmstxt.org und lädst sie über den Dateimanager deines Hosters ins Stammverzeichnis.

Was ist der Unterschied zwischen llms.txt und robots.txt?

Die robots.txt sagt Crawlern, welche Bereiche sie abrufen dürfen, und die automatischen Crawler der großen KI-Anbieter halten sich laut deren Dokumentation daran. Die llms.txt bietet Inhalte an und verbietet nichts. Wer KI-Training ausschließen will, braucht deshalb Einträge wie „User-agent: GPTBot“ mit „Disallow: /“ in der robots.txt.

Dein nächster Schritt

Wenn du wissen willst, welche KI-Crawler deine Website heute abrufen und was deine robots.txt ihnen erlaubt, schauen wir uns das im Erstgespräch gemeinsam an. Danach weißt du, ob eine llms.txt bei dir mehr wäre als eine Datei ohne Leser.

Kostenloses Erstgespräch vereinbaren

Quellen

Diese Quellen habe ich am 28.09.2026 aufgerufen und ausgewertet.