Ny metod fördelar belöningar rättvisare mellan AI-agentens sökval

arXiv cs.AI

När en AI-agent gör flera sökningar samtidigt och får ett enda gemensamt betyg tillbaka är det svårt att veta vilken sökning som faktiskt bidrog – det är det problemet CASI försöker lösa. Metoden använder något som kallas Shapley-värden (ett sätt att fördela 'äran' rättvist mellan flera bidragsgivare) och testades i ett sponsrat söksystem där den gav 3,51% förbättring i annonsörsvärde i ett riktigt A/B-test över sju dagar. Resultaten är lovande men inte entydiga – mot ett känsligare utvärderingssystem presterade CASI inte bättre än enklare alternativ.