Kurz gesagt
- Die llms.txt ist ein Vorschlag aus dem Jahr 2024: eine Markdown-Datei im Wurzelverzeichnis, die KI‑Systemen eine kurze Übersicht Ihrer Website gibt.
- Google schreibt, dass man für AI Overviews und den KI‑Modus keine neuen maschinenlesbaren Dateien oder KI‑Textdateien braucht.
- Einen belastbaren Beleg, dass große KI‑Suchsysteme die Datei für Empfehlungen nutzen, gibt es bisher nicht.
- Sie kostet wenig und schadet nicht. Wichtiger sind offene Crawler, gut lesbare Seiten und saubere Strukturdaten.
Was eine llms.txt ist
Die Idee stammt von Jeremy Howard, der sie im September 2024 auf llmstxt.org veröffentlicht hat. Websites sollen Sprachmodellen und KI‑Agenten eine kompakte Zusammenfassung in Markdown anbieten: wer sie sind, was es auf der Website gibt und welche Seiten für welche Frage wichtig sind. Hintergrund ist, dass KI‑Systeme bei der Arbeit nur begrenzt Text auf einmal verarbeiten und vollständige Webseiten mit Menüs, Skripten und Werbung schwer zu lesen sind.
Die Datei liegt üblicherweise unter /llms.txt im Wurzelverzeichnis, kann laut Vorschlag aber auch in einem Unterordner stehen und gilt dann für die Adressen darunter. Manche Websites bieten zusätzlich eine llms-full.txt mit dem gesamten Text an. Das ist eine verbreitete Ergänzung, kein Teil des Kernvorschlags.
So ist die Datei aufgebaut
Der Vorschlag gibt eine feste Reihenfolge vor. Pflicht ist nur die erste Zeile:
- Überschrift erster Ebene mit dem Namen der Website oder des Unternehmens.
- Zitatblock mit einer kurzen Zusammenfassung in ein, zwei Sätzen.
- Freie Absätze oder Listen mit wichtigen Hinweisen, ohne weitere Überschriften.
- Abschnitte mit Überschriften zweiter Ebene, die jeweils eine Liste von Links enthalten, optional mit einer kurzen Beschreibung nach einem Doppelpunkt.
- Ein Abschnitt „Optional“ für Links, die ein KI‑System weglassen kann, wenn es wenig Platz hat.
Für einen Handwerksbetrieb kann das so aussehen:
# Muster Elektrotechnik GmbH
> Elektroinstallation, Photovoltaik und Wallboxen für Privat und Gewerbe in Linz, Wels und Umgebung.
Notdienst werktags von 7 bis 18 Uhr. Angebote kostenlos nach Besichtigung.
## Leistungen
* [Photovoltaik](https://www.muster-elektro.at/photovoltaik/): Planung, Montage, Förderberatung
* [Wallbox](https://www.muster-elektro.at/wallbox/): Installation für Haus und Betrieb
## Unternehmen
* [Kontakt und Öffnungszeiten](https://www.muster-elektro.at/kontakt/)
## Optional
* [Häufige Fragen](https://www.muster-elektro.at/fragen/)
Was die Datei bringt, und was nicht
Hier lohnt ein nüchterner Blick. Google schreibt in seinen Hinweisen zu KI‑Funktionen, dass man keine neuen maschinenlesbaren Dateien, KI‑Textdateien oder besonderes Markup braucht, um in AI Overviews oder im KI‑Modus zu erscheinen. OpenAI beschreibt in seiner Übersicht der Crawler, wie die Sichtbarkeit in der ChatGPT-Suche über die robots.txt gesteuert wird, eine llms.txt kommt dort nicht vor. Auch für Perplexity und Claude ist der Zugang entscheidend, hier für PerplexityBot und Claude-SearchBot.
Einen öffentlich belegten Nachweis, dass ChatGPT, Gemini oder Perplexity Unternehmen wegen einer llms.txt häufiger empfehlen, gibt es bisher nicht. Nützlich ist die Datei dort, wo KI‑Agenten gezielt Inhalte abrufen, etwa bei technischen Dokumentationen, die Entwickler mit KI‑Assistenten durchsuchen. Für einen lokalen Betrieb ist sie eher eine saubere Visitenkarte für Maschinen als ein Weg zu mehr Anfragen. Was darüber hinaus für die Nennung in KI‑Antworten zählt, beschreibt die Seite zur Generative Engine Optimization.
Unsere Empfehlung
Legen Sie eine llms.txt an, wenn Ihre Website steht und die wichtigeren Punkte erledigt sind. Planen Sie dafür eine halbe Stunde ein, nicht ein Projekt. Versprechen von Anbietern, die eine llms.txt als Schlüssel zu ChatGPT verkaufen, sollten Sie kritisch sehen.
So legen Sie eine llms.txt an
- Inhalt festlegen: Name, ein bis zwei Sätze, was Sie tun und wo, dazu Ihre fünf bis fünfzehn wichtigsten Seiten.
- Datei schreiben: Ein einfacher Texteditor reicht. Speichern Sie die Datei als UTF-8 unter dem Namen
llms.txt. - Hochladen: Legen Sie die Datei in das Wurzelverzeichnis, sodass sie unter
ihre-domain.at/llms.txterreichbar ist. Bei WordPress und anderen Systemen gibt es dafür Erweiterungen. - Prüfen: Rufen Sie die Adresse im Browser auf. Die Datei muss als Text erscheinen, ohne Anmeldung und ohne Weiterleitung auf die Startseite.
- Pflegen: Ändern sich Leistungen oder Adressen, ändern Sie auch die llms.txt. Veraltete Angaben schaden mehr als eine fehlende Datei.
Was wichtiger ist als die llms.txt
- Die robots.txt lässt OAI-SearchBot, Googlebot, Bingbot, PerplexityBot und Claude-SearchBot zu.
- Die wichtigsten Inhalte stehen im HTML und nicht erst nach dem Laden von JavaScript.
- Jede Leistung hat eine eigene Seite mit klarer Überschrift und Ortsangabe.
- Strukturdaten nach Schema.org beschreiben Unternehmen, Standort und Leistungen.
- Google-Unternehmensprofil und Verzeichnisse enthalten dieselben Firmendaten wie die Website.
- Eine aktuelle Sitemap ist in der robots.txt eingetragen.
llms.txt und robots.txt im Vergleich
| robots.txt | llms.txt | |
|---|---|---|
| Zweck | Regelt, welche Crawler welche Seiten abrufen dürfen | Gibt KI‑Systemen eine kurze Übersicht in Markdown |
| Wirkung auf die Sichtbarkeit | Direkt: Wer gesperrt ist, wird in der ChatGPT-Suche nicht angezeigt | Nicht belegt |
| Verbreitung | Standard seit Jahrzehnten, von allen großen Crawlern beachtet | Vorschlag seit 2024, freiwillig |
| Aufwand | Wenige Zeilen, aber Fehler haben große Folgen | Eine halbe Stunde |
Quellen
- Jeremy Howard: The /llms.txt file, Vorschlag vom 3. September 2024
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI Crawlers
- Perplexity: Perplexity Crawlers
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?