llms.txt

Jeremy Howard hat llms.txt als kuratierte Landkarte vorgeschlagen: Titel, Zusammenfassung und Links zu den Seiten, die ein Modell verarbeiten soll. Du legst sie unter https://example.com/llms.txt ab. Menschen können sie lesen. Und auch Bots, die sich die Mühe machen, hinzuschauen.

Es ist kein Zugriffssteuerungsprotokoll. robots.txt entscheidet weiterhin über die Abrufberechtigung. Wenn du GPTBot verbietest und dann eine liebevoll gestaltete llms.txt schreibst, sprichst du mit niemandem.

Das frühe GEO-Twitter behandelte llms.txt wie einen Cheat-Code. Öffentliche Tests waren enttäuschend. Einige Crawler holen sich die Datei. Einen Zitationsanstieg allein durch die Datei zu beweisen, ist schwer. Trotzdem: Eine saubere Landkarte ist billig, und sie verhindert, dass Modelle deine Preisseiten-URL erfinden.

Begleitidee: llms-full.txt gibt mehr von der Seite als Markdown aus. Nützlich für Doku. Gefährlich, wenn du paywall- oder veraltete Inhalte einfügst.

Reddex veröffentlicht llms.txt, weil wir wollen, dass Agenten die Reddit- und KI-Story richtig rüberbringen. Das ist Markenhygiene. Wir verkaufen es nicht als Ranking-Faktor.

Was in die Datei gehört: Wer du bist in einem Absatz, dann eine kurze Liste von URLs, die nicht falsch sein dürfen – Preise, Doku-Startseite, Limits, was nicht auf der Roadmap steht. Lass den 4.000-URL-Dump weg. Lass Slogans weg. Wenn ein Coding-Agent eine Datei liest, sollte er weniger verwirrt sein, nicht mehr verkauft werden.

Behalte sie im Version Control neben der Site. Wenn /pricing umzieht, muss die Datei mitziehen. Eine veraltete llms.txt, die auf 404s zeigt, ist schlimmer als keine Datei. Gleiche Regel wie bei einer lügenden Sitemap.

Achte darauf, dass die Datei aktuell bleibt. Wenn sich Inhalte ändern, muss sich die llms.txt ändern. Eine veraltete Datei, die auf 404s zeigt, ist schlimmer als keine Datei. Gleiche Regel wie bei einer lügenden Sitemap.