Google wil behulpzamere robots gaan maken met Gemini

Google’s AI-lab DeepMind heeft een nieuw AI-model gemaakt waarmee het behulpzame robots mogelijk wil maken. Het is gebouwd op Gemini 2.0 en bedoeld om robots interactiever en behendiger te maken.

Gemini Robotics en Robotics-ER

Het gaat om twee verschillende systemen: Gemini Robotics, een vision-language-action-model waarmee je fysieke acties van robots kunt besturen, en Gemini Robotics-ER, een vision-taalmodel dat robots ruimtelijk inzicht geeft. Google schrijft: “We werken samen met Apptronik om de volgende generatie humanoïde robots te bouwen. We werken ook samen met een geselecteerd aantal betrouwbare testers om de toekomst van Gemini Robotics-ER. We kijken ernaar uit om de mogelijkheden van onze modellen te verkennen en ze verder te ontwikkelen op weg naar toepassingen in de echte wereld.

Google stelt dat taalmodellen om nuttig en behulpzaam te zijn voor mensen drie belangrijke kwaliteiten nodig hebben: ze moeten algemeen zijn, wat betekent dat ze zich kunnen aanpassen aan verschillende situaties; ze moeten interactief zijn, wat betekent dat ze instructies of veranderingen in hun omgeving kunnen hun omgeving; en ze moeten behendig zijn, wat betekent dat ze het soort dingen kunnen doen waarvoor mensen handen en vingers hebben.

Gemini Robotics kan taal en commando’s begrijpen en erop reageren. Hij kan beter nog dan vorige modellen reageren op wat er dan ook wordt aangegeven. Er wordt ook continu gecontroleerd wat er om de omgeving gebeurt en of er veranderingen zijn. Gemini Robotics kan taken aan die precieze manipulatie vereisen, zoals het vouwen van origami of het inpakken van een snack in een Ziploc zak. Verder zijn er ook heel veel alledaagse, menselijke bewegingen die robots moeten kunnen en enorm veel moeite vergen: veel meer dan we zouden denken.

Google zegt: “We hebben het model voornamelijk getraind op gegevens van de twee-armige robotplatform, ALOHA 2, maar we hebben ook laten zien dat het een twee-armige robot, ALOHA 2, kon besturen. Gemini Robotics kan zelfs worden gespecialiseerd voor complexere varianten, zoals de humanoïde Apollo-robot ontwikkeld door Apptronik, met als doel het uitvoeren van taken in de echte wereld.”

Gemini Robotics-ER verbetert Gemini’s begrip van de wereld op manieren die nodig zijn voor robotica en stelt robotici in staat om het te verbinden met hun bestaande low-level besturingen. Gemini Robotics-ER verbetert de bestaande vaardigheden van Gemini 2.0, zoals richten en 3D-detectie, met een grote marge. Al hij een mok ziet, dan kan hij het met twee vingers oppakken aan het oor en het oppakken zonder dat alles eruit klotst.

Google zegt tot slot: “Om het onderzoek naar robotveiligheid binnen de academische wereld en de industrie te bevorderen, lanceert Google DeepMind nieuwe benchmarks en frameworks voor veiligheid in AI en robotica. Google hanteert een holistische benadering van het onderzoek, waarbij fysieke en inhoudelijke veiligheid worden gecombineerd.”

Het is misschien niet direct heel Android, maar wel interessant om te zien waar Google zich nog meer mee bezig houdt: wat als zulke robots straks echt in ons huis lopen en ook diepe Android-integraties zouden krijgen? Zie jij dat zitten? Deel het in de reacties.