Über die Validierung von llms.txt
Was es zu validieren gibt
Das Format von llms.txt ist kurz: eine H1 mit dem Namen der Website, ein optionaler Blockzitat-Abschnitt und anschließend H2-Abschnitte, deren Inhalte als Markdown-Linklisten in Form von Name, URL und Beschreibung verfasst sind.
Da so wenig zwingend erforderlich ist, kann eine Datei vollkommen gültig sein und trotzdem nahezu keinen Wert haben – eine Überschrift und ein bloßer Link bestehen jeden strukturellen Test, sagen einem Assistenten jedoch nichts.
Deshalb trennt dieses Tool die beiden Fragen. Fehler sind Dinge, die das Format beschädigen; Vorschläge weisen darauf hin, was verhindert, dass die Datei nützlich ist.
Was das Format beschädigt
- Keine H1-Überschrift, obwohl dies die einzige wirklich erforderliche Zeile ist.
- Mehr als eine H1-Überschrift, wodurch der Name der Website uneindeutig wird.
- Listenelemente, die keine Markdown-Links sind.
- Links ohne Text zwischen den eckigen Klammern.
- Relative Pfade, die mehrdeutig sind, sobald die Datei außerhalb Ihrer Website gelesen wird.
Was sie lohnenswert macht
- Eine Zusammenfassungszeile, damit Leser wissen, worum es auf der Website geht, bevor sie Links lesen.
- Abschnittsüberschriften, damit jeder Link einem Teil der Website zugeordnet ist.
- Eine Beschreibung zu jedem Link, die angibt, was sich auf der Seite befindet, anstatt ihren Namen zu wiederholen.
- Zurückhaltung. Eine Datei mit Hunderten von Links ist eine Sitemap – der eigentliche Zweck war die sorgfältige Auswahl.
Die Beschreibungen leisten hier den größten Teil der Arbeit. Sie sorgen dafür, dass eine Seite für eine bestimmte Frage ausgewählt werden kann, statt lediglich aufgelistet zu sein.
Was dieses Tool prüft
Geben Sie Ihre Domain ein. Anschließend wird /llms.txt abgerufen, die Datei gelesen und es werden strukturelle Fehler sowie Qualitätsvorschläge getrennt voneinander gemeldet – zusammen mit einer Zusammenfassung des Datei-Inhalts.
Auch der Fall eines Soft-404-Fehlers wird erkannt: Dabei antwortet ein Server mit dem Statuscode 200 und liefert statt einer Datei seine normale Seite aus. In einem Browser sieht das wie ein Erfolg aus und ist die häufigste Ursache für falsch positive Ergebnisse.
Die Datei wird so gelesen, wie sie veröffentlicht wurde, anstatt jeden einzelnen Link abzurufen. Daher wird eine aufgelistete Seite, die inzwischen verschoben wurde, hier nicht als Fehler gekennzeichnet.
Wie es weitergeht
Wenn noch keine Datei vorhanden ist, erstellt unser
llms.txt-Generator anhand der Angaben zu Ihrer Website eine. Der
llms.txt-Checker beantwortet die einfachere Frage, ob überhaupt eine Datei vorhanden ist, und der
KI-Crawler-Checker bestätigt, dass die darin aufgeführten Seiten tatsächlich abgerufen werden können.