Het internet heeft altijd al bots gehad. Wat het nooit had gehad—tot nu toe—is een web waar bots talrijker zijn dan mensen. Matthew Prince, chief executive van Cloudflare, bevestigde dat geautomatiseerd verkeer in mei 2026 het menselijke verkeer op het netwerk van het bedrijf heeft overtroffen, een mijlpaal die volgens hem aanzienlijk eerder kwam dan hij had verwacht.

De claim draagt ongewoon veel gewicht. Cloudflare leidt en beschermt verkeer voor een aanzienlijk deel van het wereldwijde web, waardoor het bedrijf een realtime beeld heeft van wat er daadwerkelijk over het internet beweegt dat weinig organisaties kunnen evenaren. Dat uitgangspunt is belangrijk omdat het niet-menselijke verkeer in kwestie geen enkelvoudig fenomeen is: het omvat zoekgerelateerde indexering, crawlers die content scrapen als trainingsdata en AI-agenten—software die informatie ophaalt of taken uitvoert namens een gebruiker, in plaats van dat een persoon rechtstreeks een browser opent.

De berekening wordt ongemakkelijk voor uitgevers

Als mei 2026 slecht klinkt, is de vijfjarige prognose van Prince aanzienlijk verontrustender. Hij schat dat niet-menselijk verkeer tegen 2031 ongeveer 1.000 keer het volume van menselijk verkeer kan bereiken, nu AI-agenten taken uitvoeren op frequenties die geen menselijke browsesessie kan evenaren.

De data wijzen al in die richting. De crawl-naar-bezoeker-verhouding van Google—een maatstaf voor hoe vaak een crawler een site bezoekt in verhouding tot de mensen die hij terugstuurt—is verslechterd van ongeveer 6:1 naar 18:1 of slechter. Voor uitgevers die opereren op advertentiemodellen gebouwd rond menselijke aandacht, is die verhouding van enorm belang. Een crawler die een artikel lezt, genereert geen advertentie-inkomsten; een crawler die het drie keer zo vaak leest als voorheen, terwijl hijioneel minder lezers terugstuurt, is actief schadelijk voor het bedrijf.

De samenstelling van AI-verkeer verschuift ook op manieren die het beeld verder ingewikkelder maken. Trainingsverkeer—crawlers die content scrapen om grote taalmodellen te voeden—maakt momenteel 40 tot 52% uit van alle AI-crawleractiviteit, een aanzienlijke afwijking van de eerdere golf van AI-verkeer, die werd gedomineerd door zoekgerelateerde indexering. Die eerdere golf hield tenminste nog de mogelijkheid open dat een mens een link terugvolgde naar de bron; scrapen voor trainingsdata biedt geen vergelijkbaar retourpad, en daarom versterkt de verschuiving de druk op adgefinancierde uitgevers.

De reactie van Cloudflare: standaard blokkeren, dan onderhandelen

Prince en Cloudflare behandelen dit niet als een passieve observatie. Vanaf 15 september 2026 zal het bedrijf standaard AI-trainings- en agentcrawlers blokkeren op pagina's met advertenties voor nieuwe domeinen en een aanzienlijk deel van bestaande sites. Uitgevers die die toegang willen toestaan, moeten actief uitschrijven voor de blokkade—wat betekent dat, in de praktijk, sites die niets doen deze crawlers automatisch worden uitgesloten.

De architectuur van die beslissing is significant. Het omdraaien van de standaard van "toestaan tenzij geblokkeerd" naar "geblokkeerd tenzij toegestaan" verschuift de onderhandelingsmacht beslissend richting contentmakers. Nu ligt de last bij uitgevers om specifieke crawlers te identificeren en te blokkeren—een technische en operationele opgave die de meeste kleine en middelgrote uitgevers niet effectief kunnen beheersen. Onder de nieuwe standaard worden AI-bedrijven de partij die aan tafel moet komen.

Prince heeft gewezen op een pay-per-crawl- of micropaymentmodel als de logische eindbestemming, waarbij AI-bedrijven contenteigenaren direct compenseren voor elke toegang in plaats van via de indirecte, op verkeer gebaseerde advertentieketen die momenteel aan de basis ligt van de economie van het grootste deel van het web. Hoeveel uitgevers de standaardblokkade handhaven, en hoe AI-bedrijven reageren op de noodzaak om toegang te vragen, zijn de directe vragen richting de uitrol van 15 september.

Wat het betekent voor de bredere digitale economie

Het door advertenties ondersteunde web zoals het vandaag bestaat, is ontworpen voor menselijke aandacht. Display-advertenties, programmatische veilingen, doorklikpercentages, sessieduur—elke meetwaarde in de stapel veronderstelt een persoon aan de andere kant van de browser. Wanneer de meerderheid van het verkeer niet-menselijk is, begint die gehele meetinfrastructuur het verkeerde te meten.

Voor Cloudflare zelf is de strategische positie aanzienlijk. Door zichzelf te positioneren als de infrastructuurlaag waar de blokkeer-of-toestaan-beslissing wordt genomen, wordt het bedrijf een natuurlijke intermediair in elke micropayment- of licentiearchitectuur die zich ontwikkelt.