Google Gemini-model stuurt robots lokaal aan, zonder internet
De nieuwe tool is een doorontwikkeling van het eerdere Gemini Robotics-model dat in maart werd voorgesteld. De ‘On-Device’-versie maakt het mogelijk om robots direct aan te sturen met natuurlijke taalcommando’s, zonder vertraging via de cloud. Dat meldt TechCrunch. Ontwikkelaars kunnen het model bovendien aanpassen aan specifieke taken.
Volgens Google presteert het model verrassend goed. In eigen benchmarks zou het bijna even krachtig zijn als de cloudversie en duidelijk beter scoren dan andere lokale modellen, al noemt het bedrijf andere modellen ter vergelijking.
Google Gemini-robots die was plooien
Tijdens een demonstratie liet Google zien hoe robots met dit model taken uitvoeren zoals het openen van een rugzak of het netjes opvouwen van kleding. Hoewel het model in eerste instantie werd getraind op ALOHA-robots, blijkt het ook inzetbaar op andere types zoals de bi-arm Franka FR3 en zelfs de Apollo-humanoïde robot van Apptronik.
Bijzonder: de Franka FR3 kon met succes taken uitvoeren op onbekende objecten, zoals assemblagewerk op een industriële band. Dat wijst op een zekere mate van aanpassingsvermogen, iets waar eerdere modellen vaak op vastliepen.
Gemini Robotics SDK nu beschikbaar
Naast het model zelf brengt Google ook een ontwikkelkit uit: de Gemini Robotics SDK. Daarmee kunnen ontwikkelaars robots tussen de 50 en 100 voorbeeldtaken geven om hen aan te leren hoe ze nieuwe opdrachten moeten uitvoeren. Dit gebeurt binnen de MuJoCo-simulator, waarmee robots fysiek realistische oefeningen kunnen doen.
Google is niet de enige speler die zijn AI naar de robotwereld brengt. Ook Nvidia bouwt aan een platform voor foundation models voor mensachtige robots. Hugging Face werkt zowel aan open modellen als aan eigen robotica. En het Zuid-Koreaanse RLWRLD, gesteund door investeringsreus Mirae Asset, richt zich eveneens op fundamentele AI voor robots. Google wil zijn concurrentie dus liever niet zien uitlopen, zo blijkt.
