Ny metod hittar rotorsaken till fel i AI-agentsystem

arXiv cs.AI

När AI-agenter (system där en språkmodell utför flera steg i följd) misslyckas är det svårt att veta exakt vilket steg som gick fel. Forskare presenterar ReCast, en metod som lär sig bättre representationer av varje steg för att spåra fel till deras ursprung – och slår de starkaste jämförelsemetoderna med upp till 9,19 procentenheter på vissa tester. Praktiskt relevant nu när agentsystem används allt mer i produktion och felsökning är en riktig tidstjuv.