Ny metod mäter hur bra AI-agenter faktiskt lär sig av erfarenhet

arXiv cs.AI

Forskare har tagit fram ett nytt ramverk kallat 'agent plasticity' för att mäta hur effektivt AI-agenter förbättrar sig över tid – inte bara vad de klarar av vid ett givet ögonblick. Resultaten visar att olika toppmodeller lär sig i vitt skilda takter trots liknande förutsättningar: vissa förbättras markant och håller i sig, medan andra knappt rör sig från startläget. Det kluriga är att den agent som till slut presterar bäst inte nödvändigtvis är den som lär sig snabbast.