Räcker det att resonera? Ny forskning ifrågasätter när AI-reasoning faktiskt hjälper

arXiv cs.AI

Forskare har undersökt om 'reasoning' (där AI-modeller tänker högt innan de svarar) verkligen förbättrar hur modeller hittar relevant information i blandade databaser med text och bilder. Svaret är: inte alltid – i 15,7% av fallen gör resonemanget faktiskt sökresultaten sämre genom att felaktiga alternativ hamnar för nära rätt svar. Deras lösning, SURE, förbättrar en toppmodell med 1,5 procentenheter utan att behöva träna om den.