Forscher der Harvard und MIT starten MatrAIx mit 8,3 Milliarden KI-Personas
Wichtige Erkenntnisse
- •MatrAIx enthält 8,3 Milliarden KI-Personas, die jeweils über 1.290 kategoriale Dimensionen definiert sind und dazu dienen, die weltweite menschliche Bevölkerung für die Evaluierung von KI-Produkten anzunähern.
- •Validierungstests zeigten, dass die Personas in 91,5 % der Fälle über 400 Durchläufe und zehn Verhaltensattribute hinweg ihre Konsistenz mit den zugewiesenen Verhaltensmerkmalen beibehielten.
- •Das System umfasst vier interaktive Evaluierungsumgebungen – Survey, AI Chatbot, Web und App – mit mehr als 1.000 Aufgaben aus über 25 Bereichen.
- •Die Forscher veröffentlichten öffentlich einen qualitätsgefilterten Kernsatz von ungefähr einer Million Personas, davon 600.000 basierend auf echten menschlichen Daten und 400.000 synthetische.
- •Die Forschungsarbeit wurde am 4. August 2026 bei arXiv eingereicht, mit Xiaomin Li als Hauptansprechpartner und Mitwirkenden包括 Yuexing Hao, Marinka Zitnik und James Zou.
Ein Forschungsteam der Harvard und des MIT hat ein digitales Spiegelbild der Menschheit erschaffen. MatrAIx, eine neue KI-Evaluierungsinfrastruktur, enthält 8,3 Milliarden KI-Personas – annähernd eine für jeden Menschen auf der Erde –, wobei jede Persona über 1,290 kategoriale Dimensionen definiert ist. Das System wurde entwickelt, um KI-Produkte an einer synthetischen Bevölkerung zu testen, die sich wie die reale verhält.
Da KI-Systeme mittlerweile Milliarden von Nutzern erreichen, ist die Bewertung ihrer Leistung über verschiedene Bevölkerungsgruppen hinweg zu einer anerkannten Herausforderung geworden. Herkömmliche Testmethoden stützen sich in der Regel auf begrenzte Nutzerstudien oder Telemetrie nach der Bereitstellung, wodurch Fehler übersehen werden können, die nur in bestimmten demografischen Segmenten oder im Bevölkerungsmaßstab auftreten.
In den Validierungstests blieben die Personas in 91,5 % der Fälle – also in 366 von 400 Durchläufen über zehn verschiedene Verhaltensattribute hinweg – mit ihren zugewiesenen Verhaltensmerkmalen konsistent.
Was MatrAIx leistet
Im Zentrum des Projekts steht eine Datenbank namens Persona 8B. Die Forscher beschreiben sie als eine Art Volkszählung synthetischer Menschen, wobei jeder Datensatz nicht nur grundlegende demografische Daten, sondern auch ein umfangreicheres Profil über 1.290 Dimensionen hinweg erfasst.
Das Team entwickelte vier interaktive Umgebungen für die Evaluierung: Survey, AI Chatbot, Web und App. Diese Settings sollen es Entwicklern ermöglichen, zu testen, wie KI-Systeme bei der Interaktion mit unterschiedlichen Nutzertypen in realistischen Szenarien abschneiden.
Über diese Umgebungen hinweg stellten die Forscher mehr als 1.000 Aufgaben zusammen, die mehr als 25 Bereiche abdecken. Darüber hinaus führten sie 18.189 Evaluierungsdurchläufe über acht repräsentative Aufgaben durch.
Das Team und die Datenveröffentlichung
Die Arbeit mit dem Titel „MatrAIx: Simulating the World with 8.3 Billion Persona Agents“ wurde am 4. August 2026 bei arXiv eingereicht. Zu den wichtigsten Mitwirkenden gehören Xiaomin Li als Hauptansprechpartner sowie Yuexing Hao, Marinka Zitnik und James Zou, mit weiteren Affiliationen, die bis Stanford und andere Institutionen reichen.
Das Team veröffentlichte außerdem einen qualitätsgefilterten Kernsatz von etwa 1 Million Personas. Davon basieren 600.000 auf echten menschlichen Daten und 400.000 sind synthetisch. Die öffentliche Freigabe könnte es weiteren Forschungsgruppen und KI-Entwicklern ermöglichen, ihre eigenen Systeme vor dem Einsatz an einer gemeinsamen, groß angelegten synthetischen Bevölkerung zu testen.
