NieuwsAandelenAI-agenten gingen winkelen voor tv's en laptops—en faalden bijna 50% van de tijd, volgens onderzoek

AI-agenten gingen winkelen voor tv's en laptops—en faalden bijna 50% van de tijd, volgens onderzoek

Auteur: Fortune Crypto·

Belangrijkste punten

  • •Visa gaf 22 AI-agenten elk 15 winkeltaken—in totaal 330 pogingen—voor een televisie, een laptop en een haarstylingapparaat, met een totaal slagingspercentage van slechts circa 57%.
  • •De Aragon 4-versie van Google's Gemini en de Wonder-versie van Meta's Making deelden de hoogste scores, elk met geslaagde aankopen in 82% van de gevallen, vóór een Claude-agent met 76% en een OpenAI-agent met 64%.
  • •De slagingspercentages correleerden met de modelkosten: de vijf duurste modellen haalden gemiddeld 67% tegenover 50% voor de vijf goedkoopste, wat betekent dat de resultaten sterk afhangen van welk model de agent aandrijft.
  • •Veel agenten faalden omdat ze het verkeerde product kochten of niets geschikts voorstelden wanneer shoppers—net als echte consumenten—slechts een deel van de vereiste kenmerken vermeldden, zoals console-compatibiliteit, een retourtermijn van 30 dagen of Dolby Vision.
  • •Visa en concurrent Mastercard bouwen tools en scholen handelaren om agentic commerce mogelijk te maken, terwijl de juridische aansprakelijkheid voor ongeautoriseerde aankopen of fraude onopgelost blijft, al verwachtt Visa's Global Head of Growth Rubail Birwadker dat deze vragen na verloop van tijd zullen worden opgelost.
AI-agenten gingen winkelen voor tv's en laptops—en faalden bijna 50% van de tijd, volgens onderzoek

Nu persoonlijke AI-agenten zoals Muse en Claude deel gaan uitmaken van het dagelijks leven, draagt een groeiend aantal mensen winkeltaken aan hen over. Maar een nieuw onderzoek van Visa suggereert dat de technologie de klus nog niet aankan: in een uniek experiment gaf de betaalgigant 22 verschillende AI-agenten de opdracht drie alledaagse producten te kopen—een televisie, een laptop en een haarstylingapparaat—en het totale slagingspercentage bleef steken rond de 57%.

De bevindingen zijn gepubliceerd op een nieuwe Visa-website die de uitkomst van 15 afzonderlijke winkeltochten per agent beschrijft—in totaal 330 pogingen. Wellicht niet verrassend presteerden agenten aangedreven door geavanceerdere AI-modellen het best. De Aragon 4-versie van Google's Gemini en de Wonder-versie van Meta's Making behaalden de hoogste scores, elk met een geslaagde aankoop in 82% van de gevallen. Een Claude-agent eindigde derde met een slagingspercentage van 76%, terwijl een OpenAI-agent zesde werd met 64%.

De gepubliceerde gegevens van Visa brengen de prestaties van alle 22 modellen in kaart, met het slagingspercentage van elke agent op de verticale as en de kosten van elke winkelopdracht op de horizontale as. Het bedrijf wijst op een duidelijk verband met de prijs: de vijf duurste modellen slaagden gemiddeld in 67% van de gevallen, terwijl de vijf goedkoopste op 50% uitkwamen. Voor consumenten die overwegen een aankoop uit te besteden, betekent dit dat de resultaten momenteel sterk afhangen van welk model de agent aandrijft.

Een deel van de moeilijkheden van de agenten vloeit voort uit een eenvoudige realiteit: de motieven achter een bepaalde aankoop zijn vaak complex, en in veel gevallen ontberen consumenten informatie en weten ze niet zeker wat ze willen.

Het experiment van Visa was ontworpen om die dynamiek vast te leggen. Bij de tv-kooptaken kregen de shoppers—die zelf agenten waren—een lijst met kenmerken die ze in een televisie nodig hadden, zoals compatibiliteit met de spelcomputer van een kind, een retourtermijn van 30 dagen en een model met Dolby Vision. Zoals bij echte consumenten gaf de koper wel een deel van de informatie prijs, maar niet alles.

Het gevolg was dat een AI-agent om te slagen in het experiment van Visa op zo'n manier met de shopper moest interacteren dat de ontbrekende informatie binnen een redelijke tijd naar boven kwam. Succes betekende het kopen van een tv die voldeed aan de behoeften van de shopper. In veel gevallen kochten de agenten in plaats daarvan het verkeerde product of deden ze helemaal geen geschikt voorstel.

"Vanuit een vertrouwens- of technologisch perspectief zijn we er nog niet. Maar we komen snel in een wereld waarin consumenten kunnen vertrouwen en delegeren," zei Visa's Global Head of Growth Rubail Birwadker tegen Fortune.

Birwadker wees erop dat agentgedreven winkelen nog in de kinderschoenen staat, maar zich snel ontwikkelt. Hij voegde toe dat productontdekking—de focus van Visa's experiment—slechts één element is van dit nieuwe type handel waar retailers en AI-bedrijven nog achteraan zitten.

Om AI-agenten tot de winkel mainstream te laten doordringen, moeten bedrijven ook soepele en veilige betalingen mogelijk maken—een uitdaging die Visa en concurrent Mastercard al proberen aan te pakken door handelaren te scholen en tools te bouwen voor de zogenaamde agentic commerce, waarbij AI-systemen namens een klant producten zoeken, selecteren en betalen.

Er zijn ook nieuwe en onopgeloste juridische vraagstukken rond winkelende AI-agenten. Het meest opvallend: het is nog onduidelijk wie aansprakelijk is wanneer agenten ongeautoriseerde aankopen doen of fraude plegen. Volgens Birwadker zullen die vragen na verloop van tijd worden opgelost, op dezelfde manier waarop een eerdere generatie consumenten en handelaren leerde e-commerce te gebruiken—al voegde hij eraan toe dat agentgebaseerd winkelen een heel andere ervaring zal zijn dan hoe mensen vandaag online winkelen.

Naast de bekendmaking van de resultaten van zijn agent-winkelexperiment lanceerde Visa ook een website waar consumenten kunnen interacteren met de agenten die in het onderzoek werden gebruikt—een kans om de winkelvaardigheden van de agenten zelf te testen.

Dit verhaal verscheen oorspronkelijk op Fortune.com.