Nytt system utvärderar AI-svar till en bråkdel av kostnaden
arXiv cs.AI
Forskare har testat ett utvärderingssystem kallat JEV som bedömer kvaliteten på AI-genererade svar för bara 0,36% av kostnaden för ett toppmodernt LLM-baserat alternativ – och landar ändå inom tre procentenheter i träffsäkerhet. Tricket är att JEV enbart fattar beslut (godkänn/underkänn) och skickar vidare osäkra fall till ett kraftfullare system, vilket i praktiken bevarar 99% av noggrannheten. Det är en pragmatisk lösning på ett verkligt problem: att utvärdera miljontals AI-svar i stor skala kostar annars en förmögenhet.