AI-modell segmenterar tumörer med textstyrning – testad på 28 externa dataset

arXiv cs.AI

Forskare har utvecklat SyRe, en AI-modell som kan identifiera och avgränsa tumörer och riskorganer i medicinska bilder enbart utifrån textbeskrivningar – utan att behöva tränas om för varje ny uppgift. Modellen tränades på 20 miljoner bild-mask-beskrivningstriplar över 9 bildmodaliteter och 229 segmenteringsuppgifter, och klarade sig väl på 28 dataset den aldrig sett tidigare, inklusive 17 cancertyper. Det intressanta är att maskerna dessutom bevarar tillräckligt med biologisk information för att förutsäga patienters överlevnad – något som öppnar för mer automatiserad canceranalys i klinisk vardag.