Wat is robots.txt?
Robots.txt is een klein bestand waarin je zoekmachines vertelt welke delen van je site ze niet hoeven te bezoeken.
- Sinds 2005
- 5.0 op Google
- Uitleg zonder jargon
Google Partner
Shopify Partner5.0 Google ReviewsSinds 2005 in marketingNext level online succesSEO uitbestedenAI-vindbaarheidWebdesign & webshopsLooptijd 6 of 12 maandenEén vast aanspreekpuntGoogle PartnerShopify Partner5.0 Google ReviewsSinds 2005 in marketingNext level online succesSEO uitbestedenAI-vindbaarheidWebdesign & webshopsLooptijd 6 of 12 maandenEén vast aanspreekpuntKort antwoord
Wat is robots.txt?
Robots.txt is een klein bestand waarin je zoekmachines vertelt welke delen van je site ze niet hoeven te bezoeken.
Ook interessant
Het staat altijd op /robots.txt en bevat regels per bot. Het is een verzoek, geen slot: het houdt kwaadwillende bots niet tegen.
Belangrijk verschil: robots.txt houdt het bezoeken tegen, niet het indexeren. Wil je een pagina echt uit Google, gebruik dan noindex.
Ik hoop dat je dit artikel met plezier leest. Heb je hulp nodig bij SEO, GEO, UX-design, CRO, webdesign of SaaS-software? Klik dan hier en bekijk mijn diensten.
Geschreven door: Lubna Ouarghi
Waarom het uitmaakt
Eén verkeerde regel kan je hele site uit Google houden. Ik zie het vaker dan je denkt na een verhuizing of een nieuwe testomgeving.
Goed ingesteld voorkomt het dat zoekmachines tijd verspillen aan filterpagina's en zoekresultaten in je webshop.
Zo pak ik het aan
Ik controleer robots.txt bij de nulmeting, houd hem zo eenvoudig mogelijk en verwijs naar je sitemap.
Bij een livegang is dit het eerste dat ik nakijk, want een testinstelling die meeverhuist kost direct verkeer.
Veelgestelde vragen
Hoe weet ik of het goed staat?
Search Console meldt geblokkeerde pagina's. Bij de gratis scan controleer ik het ook.
Kan ik AI-bots blokkeren?
Ja, per bot. Bedenk dat je dan ook je kans op vermeldingen in AI-antwoorden blokkeert.
Bronnen en controle
Laatst bijgewerkt en gecontroleerd: september 2026 — door Lubna Ouarghi
Deze uitleg is gebaseerd op de officiële documentatie hieronder en op mijn eigen werk in klantprojecten.
- Google Search Central — SEO Starter Guide — wat SEO is en waar je begint
- Google Search Central — Heb je een SEO-specialist nodig? — wat een specialist doet en waar je op let
- Google Search Essentials — de regels waaraan je site moet voldoen
Verder lezen
Wil je weten hoe jouw website hierop staat?
Vraag de gratis vindbaarheidsscan aan. Je ziet je positie in Google, wat AI-assistenten over je zeggen en de drie stappen die het meeste opleveren.
Liever direct sparren?
Vul het formulier in of bel mij direct. Je spreekt altijd een specialist, geen accountmanager die de vraag doorzet.
- Eén vaste contactpersoon
- Maandelijkse rapportage met toelichting
- Heldere looptijd: 6 of 12 maanden
- 20+ jaar ervaring in SEO en e-commerce