Kennisbank
Wat is crawlbudget?
Zoekmachines bezoeken uw site met een gelimiteerd geduld: een hoeveelheid pagina’s en verversingen die zij per periode aan u besteden. Crawlbudget heet dat geduld — meestal ruim voldoende, en juist op groeiende sites het bewaken waard.
Bijgewerkt op 10 augustus 2026
Het antwoord in het kort
Crawlbudget is de hoeveelheid crawl-aandacht die een zoekmachine aan uw site besteedt: hoeveel pagina’s de crawler per periode ophaalt en hoe vaak hij terugkeert voor verversing. Het wordt bepaald door wat uw server aankan (crawlcapaciteit) en hoe interessant de zoekmachine uw site vindt (crawlvraag — autoriteit, versheid, populariteit). Voor kleine sites is het zelden een knelpunt; voor sites met duizenden URL’s bepaalt het hoe snel nieuw werk gevonden en oud werk ververst wordt.
Waar budget weglekt
De klassieke lekken: eindeloze URL-variaties door filters en parameters die telkens dezelfde inhoud tonen; interne zoekresultaten en agenda-pagina’s die oneindig doorlinken; kapotte links en lange doorverwijsketens; en trage servers die de crawler doen afremmen. Het gevolg is stille vertraging — de crawler verspilt zijn bezoek aan ruis, en de pagina’s die ertoe doen wachten langer op ontdekking en verversing. Het logboek van Search Console (crawlstatistieken) toont precies waar de aandacht heengaat.
Het budget richten
De gereedschappen: een schone sitemap die uitsluitend de waardevolle URL’s aanmeldt; robots-regels die ruispaden afsluiten; canonicals die varianten bundelen; snelle serverreacties die de crawler uitnodigen; en een vlakke structuur met sterke interne links die het belangrijke vooraan zet. En de contra-intuïtieve regel: minder kan meer zijn — dunne, overbodige pagina’s opruimen concentreert de aandacht op wat scoren moet. Een site die per pagina waarde biedt, wordt vanzelf gulzig gecrawld; dat is het budget dat u werkelijk wilt verdienen.
Veelgestelde vragen
Moet ik mij als mkb-site zorgen maken om crawlbudget?
Onder de duizend URL’s is de zorg vrijwel altijd overbodig: zoekmachines crawlen zulke sites moeiteloos volledig. De aandachtspunten daar zijn simpeler — een kloppende sitemap, snelle pagina’s en vrije toegang. Het budgetvraagstuk begint bij webshops, platforms en sites met veel gegenereerde URL’s.
Hoe zie ik hoe vaak Google mijn site crawlt?
In Search Console onder crawlstatistieken: aantallen per dag, reactietijden en welke bestandstypen en paden de aandacht krijgen. Eén blik verklapt de lekken — duizenden bezoeken aan parameters of afbeeldingen terwijl kernpagina’s wachten.
Crawlt AI met hetzelfde budget?
AI-crawlers hanteren eigen ritmes en zijn doorgaans selectiever: zij halen bij voorkeur de heldere, citeerbare pagina’s op. Dezelfde hygiëne — schone structuur, snelle server, vrije toegang in robots.txt — bedient beide werelden; het llms.txt-bestand wijst ze daarbij de weg.
Verder lezen
Vrijblijvend advies
Zal Ovolum vrijblijvend even meekijken met uw website?
Stel uw vraag — u ontvangt binnen één werkdag een persoonlijk, schriftelijk antwoord. Kosteloos en met volle aandacht.