robots.txt
Een tekstbestand op je site dat per bot zegt wat hij wel en niet mag ophalen.
Het staat op jouwsite.nl/robots.txt en is een van de weinige dingen die je in een minuut kunt controleren. Veel sites sluiten AI-bots uit zonder dat de eigenaar het weet, omdat een plug-in of een bouwer dat ooit heeft aangezet.
Wij lezen het bestand en tonen de letterlijke regel die een bot blokkeert, zodat je niet op ons woord hoeft af te gaan.
Hoe hard is het bewijs hiervoor
Sterk bewijsEen pagina die niet opgehaald mag worden, kan ook niet worden geciteerd; toegankelijkheid staat op 9,5 van 10 in de meta-analyse van Shepard uit 2026 over 54 studies, de hoogste van 23 factoren.
Bron: Cyrus Shepard, "AI Citation Ranking Factors", Zyppy Signal, 7 mei 2026 (meta-analyse van 54 studies)
Let op bij het bewijs: 54 studies samengevat door Shepard, overwegend Engelstalige sites en niet uitgesplitst naar taal, land of bedrijfsgrootte.
Zie ook
- AI-crawler Het programma waarmee een AI-bedrijf jouw pagina's ophaalt.
- Sitemap Een bestand dat opsomt welke pagina's je site heeft, zodat een crawler ze allemaal kan vinden.
Weten waar jij staat?
De gratis check meet of de assistenten jouw bedrijf noemen bij de vragen die klanten werkelijk stellen.
Doe de gratis check