Check · C06 · Security & Bots

llms.txt prüfen

llms.txt ist ein Markdown-Index der wichtigsten Inhalte für LLM-Werkzeuge (llmstxt.org), keine Berechtigungsdatei; welche Crawler ihn lesen, ist offen.

Was wird geprüft

Prüft, ob eine llms.txt im Web-Root liegt.

Warum ist das wichtig

llms.txt ist ein Vorschlag (llmstxt.org) für einen Markdown-Index der wichtigsten Inhalte, den LLM-Werkzeuge statt des vollen HTML lesen können. Sie regelt keine Zugriffsrechte, das bleibt Sache der robots.txt, und kein großer Crawler hat sich bisher verpflichtet, sie auszuwerten. Der Aufwand ist klein, der Nutzen bislang eine Wette.

Häufige Ursachen

Die Datei wurde nie angelegt, der Standard ist jung und der häufigste Befund schlicht: fehlt.
Eine llms.txt existiert, listet aber veraltete URLs, die ins Leere führen.
Die Datei liegt in einem Unterverzeichnis statt im Web-Root, wo sie kein Crawler sucht.

So beheben

llms.txt im Web-Root anlegen; relevante Inhalte für LLM-Retrieval listen (Spec: llmstxt.org).

Erst selbst prüfen

Der Tracking-Check testet diesen Punkt zusammen mit allen anderen in Sekunden.

Tracking-Check starten →

Verwandte Checks

robots.txt →Strukturierte Daten (JSON-LD) →

Häufige Fragen

Bringt eine llms.txt Sichtbarkeit in ChatGPT oder Perplexity?

Belegt ist das nicht. Die Datei ist ein Vorschlag von llmstxt.org, und kein großer Anbieter hat zugesagt, sie auszuwerten. Was AI-Suchen nachweislich lesen, ist das normale HTML samt JSON-LD. Die llms.txt ist eine Wette mit kleinem Einsatz: eine Stunde Arbeit, eine Markdown-Datei, kein Nachteil, wenn sie ignoriert wird.

Der Scan meldet ok, aber unsere llms.txt ist eine leere Seite. Warum?

Der Scan prüft nur, ob /llms.txt mit 200 antwortet. Manche Hoster liefern für jede unbekannte URL die Startseite aus, dann gilt die Datei als vorhanden. Den Inhalt bewertet der Scan nicht; die Datei im Browser aufrufen und prüfen, ob dort Markdown mit Ihren Kernseiten steht.

Ersetzt die llms.txt die robots.txt für AI-Crawler?

Nein. Die robots.txt sagt, wer lesen darf, die llms.txt sagt, was lesenswert ist. Wer AI-Crawler blockt und trotzdem eine llms.txt pflegt, widerspricht sich; wer sie erlaubt, gibt ihnen mit der Datei einen Wegweiser. Die Regeln für die Crawler stehen im Befund AI-Bot-Policy.

Behebung

Verdrahtet in Tagen, nicht in Sprints.

Befunde aus dem Tracking-Check gehen im Audit Sprint in eine Reihenfolge mit Aufwand, jeder Baustein mit Abnahmekriterium.

Zur Leistung Audit Sprint anfragen