Nytt ramverk försöker mäta AI:s 'visdom' – inte bara förmåga

arXiv cs.AI

Forskare föreslår ett mätsystem för vad de kallar 'artificiell visdom' – hur väl en AI anpassar sina rekommendationer när omständigheterna förändras, något som vanliga prestandatester (benchmarks) inte fångar. Ramverket bygger på nio kriterier och testades i simuleringar där ett enda kriterium krävde 24 scenarier per domän för tillräcklig precision. Resultaten är preliminära och om metoden faktiskt förutsäger bättre beslut i verkligheten är fortfarande en öppen fråga.