Nytt riktmärke testar om AI verkligen kan utforska det okända

arXiv cs.AI

Forskare har lanserat ExplorationBench, ett ramverk som mäter om AI-system faktiskt kan utforska och lära sig nya regler – inte bara återanvända träningsdata. Testet använder påhittade 'alienvärldar' med egna lagar som strider mot verklig kunskap, vilket tvingar systemen att genuint experimentera sig fram snarare än att gissa från minnet. Av de 10 testade systemen klarade de bästa att lära sig och tillämpa okända regler, men prestationen varierade kraftigt och fortsatt utforskning kunde faktiskt försämra tidigare framsteg.