Ny metod minskar 'glömska' i multimodala AI-modeller

arXiv cs.AI

Ett vanligt problem med AI-modeller som tränas på nya uppgifter är att de glömmer det de redan lärt sig – så kallad katastrofal glömska. Forskare föreslår nu CART, en metod som bättre koordinerar hur olika delar av en multimodal modell (som hanterar både text och bild) anpassas tillsammans, istället för att uppdatera dem asymmetriskt. I tester uppnår CART bättre resultat än befintliga lösningar, och håller dessutom nere modellens storlek genom att slå ihop liknande expertmoduler.