Nytt riktmärke avslöjar att AI-agenter är dåliga på att samarbeta med människor

arXiv cs.AI

Forskare har byggt Kolab – ett dataset med över 115 timmars skärminspelningar av 50 yrkesverksamma från 40 olika yrken som samarbetar med AI-agenter på komplexa arbetsuppgifter. Resultaten är talande: dagens toppmodeller överskattar systematiskt hur väl samarbetet fungerar och har svårt att skilja på bra och dåligt lagarbete. Det är lite ironiskt – vi bygger allt smartare agenter, men de förstår fortfarande inte riktigt vad det innebär att jobba tillsammans med en människa.