Nytt ramverk låter billiga AI-agenter styra och eskalera till dyrare modeller vid osäkerhet

arXiv cs.AI

LEASH är ett nytt system för så kallade datoranvändande AI-agenter som låter en liten, billig modell sköta jobbet och automatiskt kopplar in en kraftfullare modell bara när den känner sig osäker – baserat på mönster i modellens interna aktiveringar (ungefär 'vad modellen tänker på'). I praktiken matchade kombinationen Qwen2.5-35B + Claude Opus 5 den dyrare modellens träffsäkerhet på 72–73 procent, men till 19 procent lägre kostnad. Det intressanta är att systemet kräver noll extra träning och fungerar med Claude som en svart låda – man behöver alltså inte ha tillgång till modellens interna delar för att övervaka den.