AI-agent för HPC-rapportering når 69% precision mot baslinjens 7%

arXiv cs.AI

Forskare har byggt REPORT-OPS, en AI-agent som automatiserar operativa rapporter för superdatormiljöer (HPC – system som kräver extrem beräkningskraft) genom att väga samman data från flera källor och bara dra slutsatser när bevisen faktiskt stöder dem. Systemet uppnår 68,6% godkänd precision jämfört med 7% för den bästa traditionella söklösningen, och ett så kallat 'evidence gating' höjer precisionen för underbyggda påståenden från 41% till 90%. Det intressanta är inte bara siffrorna – utan att en mänsklig granskare bara behöver godkänna eller avvisa föreslagna regeländringar, vilket korrigerade 91% av identifierade fel utan att förstöra något som redan fungerade.