Modal bygger molninfrastruktur anpassad för AI-agenter

Latent Space

Modal, ett bolag som erbjuder molntjänster för AI-arbetsbelastningar, förklarar varför traditionell infrastruktur inte räcker till när AI-agenter (program som självständigt utför uppgifter) ska köras i stor skala. Medgrundaren och CTO Akshat Bubna delar med sig av vad de lärt sig under två år av att bygga det de kallar ett 'agent cloud' — en plattform designad specifikt för hur agenter beter sig, med korta intensiva körningar och oförutsägbara mönster. Det intressanta här är att infrastrukturlagret, inte modellerna i sig, alltmer avgör vad agenter faktiskt klarar av i praktiken.

Djupdykning

Modal bygger infrastruktur för AI-agenter – alltså system där AI inte bara svarar på frågor utan faktiskt utför uppgifter autonomt, som att köra kod, söka på webben eller interagera med externa tjänster. Det som skiljer agentarbetsbelastningar från vanlig AI-inferens är att de är oförutsägbara: en agent kan behöva spin up tusentals parallella processer i ett ögonblick, vänta i timmar, och sedan explodera i aktivitet igen. Traditionell molninfrastruktur är byggd för stabila, förutsägbara arbetsflöden – du betalar för servrar som tickar på dygnet runt – medan agenter kräver vad man kan kalla "elastisk granularitet", förmågan att på millisekunder skala från noll till massiv kapacitet och tillbaka. Det är ungefär samma skifte som skedde när webben gick från statiska sidor till dynamiska applikationer – backend-arkitekturen behövde fundamentalt ritas om, inte bara uppgraderas. Det de flesta missar i agentdiskussionen är att flaskhalsen inte är modellernas intelligens – det är latens och orkestrering. En agent som behöver vänta fyra sekunder på att en container ska starta är som en kirurg som behöver vänta på att skalpellen ska "boota upp" – hela värdekedjan kollapsar. Modals satsning handlar om att äga det lagret som ligger mellan AI-modellen och verkligheten, och det är ett betydligt mer försvarsbart affärsläge än att sälja GPU-tid i bulk.