Microsoft onthult Magma, AI die software kan besturen
Magma onderscheidt zich door niet alleen informatie te analyseren, maar er ook direct op te kunnen handelen, zoals bij het navigeren door interfaces en manipuleren van objecten.
Het model is ontwikkeld in samenwerking met KAIST en meerdere Amerikaanse universiteiten en integreert perceptie en controle in één systeem. Dit maakt Magma een belangrijke stap richting zogenoemde ‘agentische’ AI, waarbij systemen zelfstandig taken kunnen plannen en uitvoeren. Microsoft stelt dat Magma verbale, ruimtelijke en temporele intelligentie combineert om complexe opdrachten tot een goed einde te brengen.
Magma introduceert technieken zoals Set-of-Mark, waarmee objecten in een omgeving gemarkeerd worden voor interactie, en Trace-of-Mark, dat bewegingen leert uit videodata. Volgens Microsoft presteert Magma competitief in benchmarks en overtreft het andere AI-modellen op gebieden zoals UI-navigatie en robotbesturing.
Hoewel Magma nog beperkingen kent in complexe besluitvorming, blijft Microsoft het model verbeteren. Volgende week wordt de code vrijgegeven op GitHub, waarmee externe onderzoekers kunnen bijdragen aan verdere ontwikkelingen. Magma zou een stap kunnen zijn naar AI-systemen die niet alleen reageren, maar ook autonoom handelen in digitale en fysieke omgevingen.
