Llms.txt-bestand uploaden op website: leidt dit tot een betere vindbaarheid in AI? 

Terug naar het onderwerp: llms.txt-bestanden. Wat is dat nu eigenlijk precies? 

Een llms.txt-bestand is een gestructureerd txt-bestand (platte tekst) waarin je als het ware een routekaart geeft van jouw website. Je neemt AI-taalmachines (LLM’s) hierin mee door de belangrijkste boodschappen en pagina’s van je website. En zo help je ze om de juiste context te begrijpen als ze zoekopdrachten verwerken.   

Waar upload je dit llms.txt-bestand dan precies? Dat doe je in de root van je domein; bijvoorbeeld via de Yoast-plugin van WordPress. 

Na diverse meningen en inzichten te hebben gelezen over het effect van llms.txt-bestanden, besloten we hier zelf een test aan te wijden. We testten in eerste instantie met twee domeinen. 

Het effect? Sinds de uploads van de llms.txt-bestanden is er met name een groei te zien in verkeer dat op de website terechtkomt vanuit ChatGPT. 

• Eén van de domeinen zag een stijging van 28% in verkeer vanuit ChatGPT, over een periode van 4 weken.  

• Het andere domein zag een stijging van 40% in verkeer vanuit ChatGPT, over een periode van 10 weken.  

Het Amerikaanse bedrijf Mintlify daarentegen, de bedenker van het llms-full.txt-bestand, bewijst het tegendeel. Zij deden een experiment met 25 bedrijven. En in 7 dagen tijd werden de llms.txt-bestanden gemiddeld 62 keer bezocht door LLM’s. De meeste indexaties werden gedaan door ChatGPT. 

Daarmee weten we in ieder geval: llms.txt-bestanden kunnen wel degelijk geïndexeerd worden door LLM’s. 

Hoe spreken AI-tools zelf zich uit over dit onderwerp? Dat doen ze niet direct. Maar indirecte signalen geven ze wel. 

Wat Mintlify ons namelijk weet te vertellen: het llms-full.txt-bestand is ontwikkeld in samenwerking met Claude. Betekent dit dat Claude deze bestanden actief gebruikt, of gaat gebruiken? 

Verder heeft Perplexity zelf ook een llms.txt-bestand op hun website staan. Is dit een signaal van hun visie op dit onderwerp? 

Harde conclusies kunnen we hier niet uit trekken. Maar interessante informatie is het absoluut. 

Tot slot: Yoast SEO. De SEO-plugin in WordPress waar iedere SEO-specialist vrienden mee is. Zij hebben llms.txt standaard geïntegreerd in hun toolset. Yoast-gebruikers genereren dus eenvoudig een llms.txt-bestand; direct via de tool.  

Waarom heeft Yoast dit geïntegreerd? Zij stellen dat llms.txt-bestanden er met name voor zorgen dat AI-tools betere informatie geven over je website. In tegenstelling tot Google, scannen LLM’s volgens hen namelijk maar kleine delen van je website bij het beantwoorden van een vraag. Hierdoor missen ze belangrijke informatie. Met verouderde, onvolledige of onjuiste informatie over je bedrijf tot gevolg. 

Yoast geeft hier dus niet direct aan dat llms.txt zou leiden tot een betere vindbaarheid in AI. Maar indirect delen ze wel hun visie hierop; zij denken dus wel degelijk dat llms.txt-bestanden worden geïndexeerd door LLM’s. 

Even samengevat: wat weten we tot nu toe? 

• Google geeft aan dat llms.txt-bestanden niet gelezen worden door AI-tools. 

• Uit het onderzoek van Mintlify blijkt dat dit wel degelijk het geval is. 

• In ons eigen GEO-experiment zagen we – na het uploaden van een llms.txt-bestand – bij beide domeinen een stijging in verkeer dat op de website landt via ChatGPT.  

• Tegelijkertijd moeten we ons afvragen in hoeverre dit resultaat een goede afspiegeling van de werkelijkheid; geeft de groei in het aantal ChatGPT-gebruikers wellicht een vertekend beeld?  

• Perplexity en Claude geven indirecte signalen af; gebruiken zij llms.txt actief, of gaan ze dit wellicht doen? 

• Veel bedrijven zien de waarde in van llms.txt; het aantal llms.txt-bestanden op het internet is groot. 

• Yoast SEO heeft llms.txt standaard geïntegreerd in hun toolset; indirect vertelt dit ons dat zij denken dat llms.txt-bestanden worden gelezen door LLM’s.  

Dan natuurlijk de vraag: wat kunnen we met deze informatie? Harde bewijzen zijn er nog niet. Van een direct verband tussen llms.txt en een betere vindbaarheid in AI kunnen we daarom niet spreken.  

Maar tegelijkertijd moeten we ons afvragen: hoe zal het zijn over 6 tot 12 maanden? Dat weten we nog niet. Dat weet niemand. 

Daarom is ons advies om wél een llms.txt-bestand te uploaden op je website. Ook al weet je nog niet precies wat het effect gaat zijn: het zijn de kleine wijzigingen waarmee je nu je voorsprong pakt. Zorg ervoor dat je sneller en slimmer bent dan je concurrent. Het uploaden van een llms.txt-bestand is een kleine moeite. En misschien wel met grote gunstige gevolgen. 

Want, zoals uit dit artikel blijkt: ondanks de ontkrachtende beweringen, zijn er sterke signalen dat llms.txt-bestanden wel degelijk bijdragen aan een betere vindbaarheid in LLM’s.