Stel je voor: je runt een groothandel in bouwmaterialen. Je website trekt 50.000 bezoekers per maand. Maar wist je dat méér dan de helft van dat verkeer geen mensen zijn? Het zijn bots. AI-crawlers van OpenAI, Google, Anthropic — ze schrapen je productbeschrijvingen, je prijzen, je klantreviews. En jij betaalt de serverkosten.
Tot nu toe was je enige optie een noodrem: alle AI-bots blokkeren. Maar dat betekende ook dat Google je site niet meer kon indexeren. Geen Google, geen bezoekers. Een keuze tussen twee kwaden.
Cloudflare verandert dat vandaag.
Van alles-of-niets naar een verkeerslicht
Sinds juli 2024 konden Cloudflare-klanten met één klik alle AI-crawlers weren. Effectief, maar bot. Want niet elke bot is een vijand. De Googlebot die je site indexeert voor zoekresultaten? Die wil je wél. De GPTBot die je content gebruikt om ChatGPT te trainen? Misschien niet.
Vanaf nu krijg je drie knoppen. Search: crawlers voor zoekmachines. Training: crawlers die data verzamelen voor AI-modellen. Agent: bots die namens gebruikers handelen, zoals ChatGPT die een webpagina samenvat. Je kunt per categorie bepalen wie er binnenkomt.
En vanaf 15 september 2026 worden Training- en Agent-bots standaard geblokkeerd op pagina's met advertenties. De logica is glashelder: als jij betaalt voor advertenties om menselijke bezoekers te trekken, waarom zou je dan servercapaciteit verspillen aan bots die nooit iets kopen?
De bot-economie is groter dan de mens-economie
Cloudflare-CEO Matthew Prince liet in juni 2026 een bom vallen: botverkeer is voor het eerst groter dan menselijk verkeer op het internet. Een mijlpaal die hij zelf pas eind 2027 verwachtte. We zijn er nu al.
Voor jouw MKB-website betekent dat: elke euro die je uitgeeft aan hosting, aan bandbreedte, aan laadtijd — de helft daarvan gaat naar niet-menselijke bezoekers. Bots die je content kopiëren, je prijzen scrapen, je SEO-positie analyseren. En jij betaalt de rekening.
Verrassend genoeg is dit geen technisch probleem — het is een bedrijfseconomisch probleem. Je betaalt voor infrastructuur die je concurrenten gebruiken om jou in te halen. Een AI-crawler van een prijsvergelijkingssite kan jouw hele assortiment in 30 seconden scrapen. Jij hebt maanden werk in die data zitten.
Wat dit betekent voor Nederlands MKB
Nederlandse webshops en MKB-sites draaien massaal op standaard hostingpakketten zonder bot-bescherming. TransIP, Strato, Antagonist — de gemiddelde MKB-hosting biedt geen granulair bot-beheer. Je site is een open buffet.
Maar hier is het goede nieuws: Cloudflare's gratis plan bevat de nieuwe bot-controls. Je hoeft geen enterprise-contract van €5.000 per maand af te sluiten. Een gratis Cloudflare-account, je DNS omzetten (duurt 10 minuten), en je hebt dezelfde bot-bescherming als de Fortune 500.
Voor enterprise-klanten lanceert Cloudflare ook BotBase — een doorzoekbare database van alle bekende bots. Je ziet per bot wat 'ie doet: alleen linken naar je pagina's, of je content volledig reproduceren. Transparantie die voorheen alleen techreuzen hadden.
Neem een Nederlandse webwinkel in sportartikelen. Die heeft 15.000 productpagina's met unieke beschrijvingen, geschreven door een team van drie contentspecialisten. Een prijsvergelijkingsbot scrapet die beschrijvingen wekelijks en gebruikt ze om een concurrerende site te vullen. De webwinkel betaalt voor de content én voor de bandbreedte die de bot verbruikt. Met Cloudflare's nieuwe controls blokkeer je die specifieke bot — zonder dat Google je producten niet meer kan vinden. Dat is het verschil tussen een noodrem en een verkeerslicht.
Drie dingen die je deze week kunt doen
1. Check je huidige bot-verkeer
Log in op je hosting-dashboard of Google Analytics. Kijk naar "direct traffic" en "referral traffic" — een onverklaarbaar hoog percentage is vaak bot-verkeer. Als meer dan 30% van je bezoekers minder dan 2 seconden op je site blijft, heb je een bot-probleem.
2. Zet Cloudflare voor je domein
Cloudflare's gratis plan dekt 95% van de MKB-behoeften. DNS omzetten, SSL aanzetten, en de nieuwe bot-controls activeren. Tijdsinvestering: 30 minuten. Besparing op bandbreedte: 20-40%.
3. Bepaal je bot-strategie
Niet elke bot is slecht. Search-bots wil je toelaten — die brengen bezoekers. Training-bots van OpenAI en Google kun je blokkeren — die gebruiken jouw content om hun product beter te maken, niet het jouwe. Agent-bots zijn een grijs gebied: ChatGPT die jouw pagina samenvat voor een gebruiker kan verkeer opleveren, maar ook je content kannibaliseren.
De menukaart ligt er. Het is aan jou om te bepalen wie er aan tafel mag.