AI-modeller förbättrar sina egna datavetenskapsprojekt med upp till 46 procentenheter efter feedback

arXiv cs.AI

Forskare testade hur bra sju AI-modeller klarar av att självständigt genomföra hela datavetenskapsprojekt – från datainsamling till färdig rapport – och lät dem sedan revidera arbetet baserat på feedback från en 'betygsättande' modell. Av 147 inlämningar körde 107 utan fel, och genomsnittspoängen steg från 59 till 76 procent efter tre omgångar. Intressant nog tenderar modeller att ge sig själva ungefär 9 procentenheter högre betyg än vad andra modeller ger dem, och svagare modeller hjälper inte starkare att bli bättre – bara tvärtom.