Flerspråkiga AI-modeller ger samma svar men av olika skäl

arXiv cs.AI

Forskare har upptäckt att stora språkmodeller ofta ger samma slutsvar på olika språk, men via helt olika tankekedjor – vilket är problematiskt när AI används i utbildning eller säkerhetsgranskning. I studien, som testade sex ledande modeller på sju språk, visade sig den vanliga mätmetoden överskatta hur lika resonemanget faktiskt är: 52–67 % av fallen som såg likadana ut på ytnivå skilde sig markant i underliggande struktur. Det intressanta är alltså inte att svaret stämmer, utan att vägen dit kan vara fundamentalt annorlunda beroende på vilket språk du frågar på.