Ny metod mäter när det faktiskt lönar sig att spara AI-agentens framsteg

arXiv cs.AI

Forskare har undersökt när kodande AI-agenter (system som självständigt löser programmeringsuppgifter) ska spara mellanlägen för att kunna återhämta sig effektivt vid fel. På 12 testuppgifter visade det sig att rätt placerad checkpoint sparar 49,4 sekunder per uppgift – men att en andra checkpoint bara ett steg senare faktiskt kostar mer än den sparar. Det intressanta är att det klassiska tumreget 'spara ofta' är fel: eftersom återhämtning innebär att härleda lösningen på nytt snarare än att spela upp den, är mängden sparad kod en dålig guide till faktisk tidsvinst.