llms.txt: wat het is, hoe het formaat werkt en of je er een nodig hebt
llms.txt is een Markdown-bestand in de root van een site dat een taalmodel vertelt wat de site is en welke pagina's het lezen waard zijn. Het werd voorgesteld in september 2024. Het is geen webstandaard, geen enkele grote zoekmachine zegt het te gebruiken, en ongeveer een op de zes van de drukst bezochte sites levert er een. Hier lees je het formaat, de gemeten cijfers en een eerlijk antwoord op de vraag of je er een moet publiceren.
Wat is llms.txt?
llms.txt is een gewoon Markdown-bestand op /llms.txt. Het stelt de site in een zin of twee voor en somt dan de URL's op die een taalmodel zou moeten lezen, gegroepeerd onder koppen. Het idee is een AI-assistent een korte, schone kaart te geven in plaats van een hele HTML-site vol menu's, scripts en advertenties.
Jeremy Howard stelde het voor op llmstxt.org op 3 september 2024. Het is een voorstel uit de community: geen standaardisatieorgaan publiceert het, en geen AI-bedrijf heeft toegezegd het te lezen.
| Feit | Waarde |
|---|---|
| Voorgesteld | 3 september 2024 |
| Specificatie | llmstxt.org |
| Locatie | /llms.txt, of een subpad |
| Formaat | Markdown |
| Verplicht deel | Eén H1 |
| Standaardisatieorgaan | – |
| Gebruikt door Google Zoeken | – |
Het wordt vaak verward met robots.txt. Ze doen iets anders: robots.txt zegt wat een crawler mag ophalen, en crawlers volgen dat onder RFC 9309. llms.txt suggereert alleen wat het lezen waard is. Het staat niets toe en blokkeert niets. Voor de kant van de crawler, zie de gids over AI-crawlers en de gids over de robots.txt tester.
Het llms.txt-formaat, regel voor regel
De specificatie op llmstxt.org legt de delen in een vaste volgorde vast. Alleen de eerste kop is verplicht.
| Deel | Vereist | Markdown |
|---|---|---|
| Naam van de site of het project | ✓ | H1 (#) |
| Korte samenvatting | – | Blockquote (>) |
| Details | – | Alinea's of lijsten |
| Bestandslijsten | – | H2 (##) + links |
| Optionele sectie | – | H2 met de naam Optional |
Elk item in een bestandslijst is een Markdown-link, eventueel gevolgd door een dubbele punt en een notitie. Links onder een H2 met de naam Optional mag een assistent overslaan als hij een kortere context nodig heeft. Een minimaal bestand ziet er zo uit:
# Example Store
> Hand-made ceramic tableware, shipped from Portugal to the EU and the US.
Prices are in euros. Every product page lists dimensions and care.
## Products
- [Plates](https://example.com/plates/): dinner, side and serving plates
- [Mugs](https://example.com/mugs/): 250 ml and 350 ml
## Help
- [Shipping](https://example.com/shipping/): costs and delivery times
- [Returns](https://example.com/returns/): 30 days
## Optional
- [Our story](https://example.com/about/)
De specificatie stelt ook een Markdown-kopie van elke nuttige pagina voor op dezelfde URL met .md erachter, bijvoorbeeld page.html.md. Een begeleidend bestand, llms-full.txt, is een gangbare uitbreiding: de volledige tekst van de pagina's in één bestand in plaats van links ernaar. Het voorstel staat ook een bestand op een subpad toe, zoals /docs/llms.txt, voor de pagina's daaronder.
Wie levert echt een llms.txt? De cijfers
SEO ProCheck vroeg op 29 september 2026 vijf agentbestanden op bij 184 van de meest bezochte sites. Alleen totalen:
| Bestand | Sites die het leveren | Aandeel |
|---|---|---|
| /llms.txt | 31 van 184 | 16.8% |
| /llms-full.txt | 6 van 184 | 3.3% |
| /AGENTS.md | 1 van 184 | 0.5% |
| /.well-known/llms.txt | 0 van 184 | 0% |
| /ai.txt | 0 van 184 | 0% |
Bijna elke site die er een leverde, verkoopt software of tools voor developers. Het mediane bestand was 12.490 bytes, dus het zijn echte bestanden, geen placeholders. De volledige methode staat in Who Actually Serves an llms.txt? 184 Top Sites Measured. Adoptie zegt wie bereid is er een te publiceren. Het zegt niets over de vraag of een assistent het leest.
Onze eigen twee sites, gecontroleerd op 21 november 2026:
| Site | /llms.txt | Content-Type | Grootte |
|---|---|---|---|
| seoprocheck.com | 200 | text/plain | 3.078 bytes |
| neova.app | 404 | text/html | geen |
SEO ProCheck publiceert er een omdat de lezers SEO's zijn die zulke bestanden testen. neova.app nog niet. Beide zijn prima. Een ontbrekende llms.txt is geen fout.
Gebruikt Google of een AI-assistent llms.txt?
Dit zegt elk bedrijf in zijn eigen documentatie, per 21 november 2026:
| Bedrijf | Leest llms.txt | Bron |
|---|---|---|
| Google Search | – | Gids voor AI-optimalisatie |
| OpenAI | Niet gedocumenteerd | Documentatie over crawlers |
| Anthropic | Niet gedocumenteerd | Documentatie over crawlers |
| Perplexity | Niet gedocumenteerd | Documentatie over bots |
Google is de enige die het ronduit zegt. De gids voor optimaliseren voor generatieve AI-functies, gepubliceerd op 15 mei 2026, zegt dat je geen machineleesbare bestanden, AI-tekstbestanden, markup of Markdown nodig hebt om in Google Zoeken te verschijnen. Daarbij staat dat een llms.txt gemaakt voor andere diensten de zichtbaarheid in Google Zoeken niet helpt en niet schaadt, omdat Google Zoeken het negeert. John Mueller van Google had in juni 2025 gezegd dat geen enkel AI-systeem het bestand gebruikte en dat serverlogs dat lieten zien.
Waar het bestand kan helpen, is op het moment van inferentie: een codeerassistent of agent die iemand op je documentatie richt, kan het ophalen en de links volgen. Daarom lopen bedrijven met developertools voorop. llms.txt Explained op SEO ProCheck loopt het bewijs langs, ook wat serverlogs laten zien.
Moet je een llms.txt publiceren?
| Je site | Er een publiceren? | Waarom |
|---|---|---|
| Documentatie voor developers of een API | ✓ | Agents lezen documentatie op verzoek |
| Softwareproduct | ◐ | Goedkoop, weinig opbrengst |
| Webwinkel | ◐ | Feeds en pagina's tellen meer |
| Nieuws of uitgever | – | Geen gedocumenteerde lezer |
| Lokaal bedrijf | – | Bedrijfsprofiel telt meer |
Publiceer je er een, dan kost het een uur en een beetje onderhoud. Doe je het niet, dan verlies je niets meetbaars in Google Zoeken, de enige plek waarvan een bedrijf dat zwart op wit heeft gezegd. Wat wel telt voor elke AI-assistent, is dat zijn crawler je pagina's kan ophalen en de hoofdcontent in de HTML krijgt. Los dat eerst op; het staat in AI search optimalisatie en ChatGPT SEO.
Twee waarschuwingen. Ten eerste is een llms.txt openbaar, dus alles wat je opsomt is een suggestie aan iedereen, scrapers inbegrepen. Ten tweede is het geen toegangscontrole: een pagina die niet in llms.txt staat, ligt nog steeds open voor elke crawler die robots.txt toelaat.
Zo schrijf en lever je een llms.txt
- Kies de pagina's. 10 tot 50 URL's die antwoord geven op wat mensen over je vragen: product, prijzen, documentatie, beleid, contact. Niet elke URL; dat is het werk van de sitemap.
- Schrijf de H1 en de samenvatting. De naam, dan één zin die een buitenstaander begrijpt.
- Groepeer de links onder H2's en zet na elke link een korte notitie.
- Lever het als tekst.
/llms.txt, status 200,Content-Type: text/plainoftext/markdown, UTF-8. - Link alleen naar live URL's. Elke link hoort 200 te antwoorden, geen redirect of 404.
- Houd het actueel. Genereer het opnieuw als pagina's verhuizen. Een verouderd bestand stuurt assistenten naar dode pagina's.
| Onderdeel | Goed | Probleem |
|---|---|---|
| Status | 200 | 5xx |
| Content-Type | text/plain | text/html |
| Eerste regel | # Naam | Al het andere |
| Links | Antwoorden 200 | 404 of redirect |
| Grootte | Een paar KB | Hele site inline |
Een veelgemaakte fout is een CMS of CDN dat op /llms.txt antwoordt met de homepage of een opgemaakte 404-pagina en status 200. Voor een lezer is dat een HTML-pagina, geen llms.txt.
Controleer je llms.txt en agentbestanden met Neova
Neova controleert een gepubliceerde llms.txt en de andere agentbestanden. Het schrijft er geen voor je, en een site zonder deze bestanden krijgt geen melding. De checks:
- llms.txt is onjuist opgemaakt of geeft een serverfout: een 5xx, of een 200 met een Content-Type dat geen tekst is of een eerste regel die geen
# titleis. Een 404, 410 of HTML-pagina telt als geen bestand. - Markdown-versie is leeg of bevat minder dan de helft van de hoofdtekst, wanneer de start-URL op
Accept: text/markdownmet Markdown antwoordt. - Manifest voor agent discovery is ongeldig of wordt niet geleverd, voor agent discovery-bestanden die in robots.txt of in een link worden aangekondigd.
- Verzoek met de user agent van een AI-zoekcrawler wordt geblokkeerd, want een bestand dat niemand kan ophalen, helpt niemand.
- Belangrijke HTML-pagina beperkt snippets of blokkeert crawlers van AI-zoekmachines.
- Hoofdcontent begint na de eerste 5.000 tekens broodtekst, de HTML-kant van dezelfde vraag.
Wat elke AI-assistent krijgt vraagt steekproefpagina's op als 10 AI-agents en toont wie de volledige pagina krijgt en wat robots.txt toestaat. Dit draait in de desktopapp op Mac, Windows en Linux en in Neova Online in de browser. Het Free-abonnement crawlt 1.000 URL's met elke check; zie Prijzen of download Neova.
Vragen
Wat is llms.txt?
Een Markdown-bestand op /llms.txt dat een site noemt, samenvat en de pagina's opsomt die een taalmodel zou moeten lezen. Het werd op 3 september 2024 voorgesteld op llmstxt.org en is geen officiële webstandaard.
Gebruikt Google llms.txt?
Nee. De gids van Google over generatieve AI-functies, gepubliceerd op 15 mei 2026, zegt dat Google Zoeken llms.txt negeert en dat het de zichtbaarheid daar niet helpt en niet schaadt.
Is llms.txt hetzelfde als robots.txt?
Nee. robots.txt vertelt crawlers wat ze mogen ophalen en is een standaard, RFC 9309. llms.txt suggereert alleen wat er te lezen valt en blokkeert niets.
Hoeveel sites hebben een llms.txt?
In de meting van SEO ProCheck van 29 september 2026 leverden 31 van de 184 topsites /llms.txt (16,8%), bijna allemaal bedrijven in software of developertools.
Wat is llms-full.txt?
Een begeleidend bestand met de volledige tekst van de opgesomde pagina's in één Markdown-bestand in plaats van links ernaar. In dezelfde meting leverden 6 van de 184 sites er een.