Kan ett dynamiskt internt fält styra hur mycket en AI-modell tänker?

arXiv cs.AI

Forskare har undersökt om ett matematiskt styrsystem – ett så kallat homeostatiskt fält – kan reglera hur mycket beräkning en transformer-modell använder, utan att själv utföra tänkandet. Resultatet är nedtonat: fältet är stabilt och verifierbart (man kan i realtid kontrollera att det inte spårar ur), men det förbättrar inte modellens prestanda jämfört med enklare alternativ som GRU (en typ av återkopplande neuralt nätverk). Det intressanta är alltså inte vad det gör, utan att det som enda alternativ kommer med ett matematiskt stabilitetsintyg.