Über die llms.txt-Datei
Was ist eine llms.txt-Datei?
Eine llms.txt-Datei ist ein kurzes Markdown-Dokument im Stammverzeichnis einer Website unter /llms.txt, das KI-Assistenten auf die lesenswerten Seiten verweist und für jede Seite in einer Zeile angibt, welche Inhalte sie abdeckt. Sie wurde Ende 2024 von Jeremy Howard von Answer.AI vorgeschlagen.
Sie existiert, weil ein Modell beim direkten Lesen einer Seite zunächst Navigation, Banner und Markup durcharbeiten muss, um zu den Inhalten zu gelangen, und dafür nur begrenzten Platz zur Verfügung hat. Ein kuratierter Index übersichtlicher Seiten ist ein besserer Ausgangspunkt als das Crawlen sämtlicher Inhalte.
Dieses Prüfprogramm ruft /llms.txt für die von Ihnen eingegebene Domain ab und meldet, ob eine solche Datei veröffentlicht wurde.
Eine Konvention, die sich noch durchsetzt
llms.txt ist neu, und die Herausgeber haben den Anfang gemacht. Dokumentationsseiten haben die Datei früh übernommen, die Unterstützung durch eine wachsende Zahl von Frameworks ist hinzugekommen, und die Zahl der Websites, die eine solche Datei veröffentlichen, steigt stetig.
Die KI-Anbieter haben sich bisher nicht öffentlich dazu verpflichtet, die Datei zu lesen, was in dieser Phase normal ist – genauso war es bei XML-Sitemaps und strukturierten Daten, bevor sich auch diese durchsetzten.
Das macht die Veröffentlichung einer solchen Seite zu einem sinnvollen frühen Schritt und nicht zu einer Ranking-Taktik: ein Nachmittag zum Schreiben, danach kein Pflegeaufwand außer dem Aktualisieren der Links, und sie ist eingerichtet, bevor sich der Support etabliert.
Was eine gute Datei enthält
- Eine H1-Überschrift mit dem Namen der Website oder des Projekts – dies ist die einzige erforderliche Zeile.
- Ein Blockquote, der die Website in einem Satz zusammenfasst.
- H2-Abschnitte, die jeweils eine Liste von Links enthalten, angegeben als Name, URL und Kurzbeschreibung.
- Beschreibungen, die erläutern, was sich auf der Seite befindet, anstatt ihren Titel zu wiederholen.
- Einen Abschnitt mit der Überschrift „Optional“ für Links, die bei begrenztem Platz übersprungen werden können.
Selektivität ist der entscheidende Punkt. Zwanzig gut beschriebene Seiten sind nützlicher als jede URL, die Sie haben, und eine Datei mit Hunderten von Einträgen ist lediglich eine Sitemap mit zusätzlichen Schritten.
Was dieses Tool prüft
Es ruft /llms.txt im Stammverzeichnis der Domain ab und meldet, ob dort eine Datei bereitgestellt wird.
Es bestätigt das Vorhandensein, statt den Inhalt zu bewerten. Daher besteht auch eine Datei, die zwar existiert, aber nichts Nützliches auflistet, diesen Test. Lesen Sie das Ergebnis als „Ist dies eingerichtet?“, und bewerten Sie anschließend die Datei selbst anhand der oben genannten Punkte.
Wie es weitergeht
Falls Sie noch keine haben, erstellt unser
llms.txt-Generator anhand der Daten Ihrer Website innerhalb weniger Minuten eine korrekt formatierte Datei. Prüfen Sie anschließend mit dem
KI-Crawler-Checker und dem
robots.txt-Checker, ob die darin angegebenen Seiten tatsächlich gecrawlt werden können.