AI-verktyg bedömer TOEFL-uppsatser med 96% godkännandegrad

arXiv cs.AI

Forskare har byggt WrAFT, ett AI-drivet system för att betygsätta och ge feedback på argumenterande essäer – testat på 480 TOEFL-uppsatser med officiella poäng som referens. Systemet uppnår ett QWK-värde (ett mått på hur väl bedömningar stämmer överens) på 0,84, vilket är i nivå med mänskliga bedömare, och den feedback det genererar fick över 93% godkännande av mänskliga granskare. Verktyget är gratis och öppet för alla att använda, vilket gör det intressant för både språklärare och testutvecklare.