Een team onderzoekers van Harvard en MIT heeft een digitale spiegel van de mensheid gebouwd. MatrAIx, een nieuwe AI-evaluatie-infrastructuur, bevat 8,3 miljard AI-persona's, ongeveer één voor elke persoon op aarde, waarbij elke persona is gedefinieerd over 1.290 categorische dimensies. Het systeem is ontworpen om AI-producten te testen tegen een synthetische populatie die zich gedraagt als de echte.

Nu AI-systemen miljarden gebruikers bereiken, is het evalueren van hun prestaties over diverse populaties een erkende uitdaging geworden. Traditionele testmethoden zijn doorgaans gebaseerd op beperkte gebruikersonderzoeken of telemetrie na uitrol, waardoor fouten die zich alleen voordoen binnen specifieke demografische segmenten of op populatieniveau kunnen worden gemist.

In validatietests bleven de persona's in 91,5% van de gevallen consistent met hun toegewezen gedragskenmerken, oftewel 366 van de 400 tests over tien verschillende gedragskenmerken.

Wat MatrAIx doet

Centraal in het project staat een database genaamd Persona 8B. De onderzoekers beschrijven dit als een telling van synthetische mensen, waarbij elk record niet alleen basisdemografie bevat, maar ook een breder profiel over 1.290 dimensies.

Het team bouwde vier interactieve omgevingen voor evaluatie: Survey, AI Chatbot, Web en App. Deze instellingen zijn bedoeld om ontwikkelaars te laten testen hoe AI-systemen presteren bij interactie met verschillende soorten gebruikers in realistische scenario's.

Binnen die omgevingen stelde het onderzoeksteam meer dan 1.000 taken samen die meer dan 25 domeinen bestrijken. Ook voerden zij 18.189 evaluatietests uit over acht representatieve taken.

Het team en de publicatie van data

Het paper, getiteld “MatrAIx: Simulating the World with 8.3 Billion Persona Agents,” werd op 4 augustus 2026 ingediend bij arXiv. Belangrijke bijdragers zijn Xiaomin Li als lead contact, samen met Yuexing Hao, Marinka Zitnik en James Zou, met aanvullende affiliaties bij Stanford en andere instellingen.

Het team heeft ook een kwaliteitsgefilterde coreset van ongeveer 1 miljoen persona's openbaar vrijgegeven. Daarvan zijn 600.000 gebaseerd op echte menselijke data en 400.000 synthetisch. De openbare release kan andere onderzoeksgroepen en AI-ontwikkelaars in staat stellen hun eigen systemen te stresstesten tegen een gedeelde synthetische populatie op grote schaal vóór implementatie.