Nytt riktmärke avslöjar regelefterlevnadsbrister hos stora AI-modeller

arXiv cs.AI

Forskare har tagit fram EADC, ett nytt testramverk med över 4 400 fråga-och-svar-par, för att bedöma hur väl stora språkmodeller (LLMs) följer AI-lagar och regelverk. Det intressanta är att befintliga tester bara fångar uppenbara problem – EADC är designat för att hitta dolda risker som smyger sig förbi vanliga filter, som inbyggd diskriminering och kränkningar av personlig integritet. Testerna visar att även de mest avancerade modellerna på marknaden har tydliga blinda fläckar när det gäller regelefterlevnad.