AI-agenter som spårar ur – ska övervakas av ännu mer AI

TechCrunch AI

När företag låter AI-agenter (självständiga AI-program som utför uppgifter på egen hand) sköta allt längre och mer komplexa uppdrag uppstår ett övervakningsproblem: agenterna agerar snabbare och i större volymer än vad människor hinner granska. Lösningen som nu diskuteras är att använda ytterligare AI-lager för att hålla koll på de första – vilket i sig väcker frågan om vem som egentligen har koll på vad.

Djupdykning

När företag börjar använda AI-agenter för att utföra längre och mer komplexa uppgifter – tänk dig ett AI-system som självständigt bokar möten, skriver kod, skickar mejl och fattar beslut i timmar utan mänsklig inblandning – uppstår ett grundläggande kontrollproblem. En människa kan helt enkelt inte hänga med i realtid när agenten gör hundratals mikrobeslut i minuten. Lösningen som branschen börjar gravitera mot är att sätta AI att övervaka AI, alltså separata "vakthunds-agenter" som granskar andra agenters beteende och flaggar avvikelser. Det låter elegant men skjuter egentligen bara problemet ett steg uppåt i kedjan – för vem övervakar övervakarna? Det de flesta missar i den här diskussionen är att det inte primärt handlar om teknisk säkerhet, utan om ansvarsutkrävande. Om en AI-agent fattar ett felaktigt affärsbeslut och en annan AI godkände det, är det juridiskt och organisatoriskt oklart vem som bär skulden. Företag som rusar in i agentbaserade system utan att lösa den frågan riskerar inte bara tekniska haverier utan genuina governance-kriser när något väl går fel.