G1 leert fles en hoed hanteren uit camerabrilopnamen

Onderzoekers trainen met omgezette menselijke opnamen. De fysieke G1 tilt een fles in 9 van 20 proeven en zet een hoed op in 5 van 20.

Chen Liu en Nikolaus Correll beschrijven in een preprint Ego2Sim2Humanoid. Opnamen van een mens met een Aria Gen 2-bril worden omgezet naar een gesimuleerde omgeving en bewegingen die bij de robot passen. Daarmee trainen ze GR00T N1.7 zonder echte robotdemonstraties van de twee onderzochte taken. De fysieke proef gebruikt een G1 met 29 vrijheidsgraden, Dex3-handen en een hoofdcamera. De robot loopt naar een tafel om een fles op te tillen of een hoed op te zetten. Dat lukt respectievelijk in 9 en 5 van 20 autonome pogingen. Veel mislukkingen ontstaan bij het vastpakken; bij drie hoedpogingen ontstaat een botsing met het hoofd. Voorwerpen die sterk vervormen of een lastige gewichtsverdeling hebben blijven een beperking.

Wat betekent dit?

Menselijke opnamen kunnen robottraining ondersteunen. De lage slagingspercentages laten tegelijk zien hoeveel werk nog nodig is voor een betrouwbare taakuitvoering.

Bron: Chen Liu en Nikolaus Correll, arXiv ↗. Samengevat door YourWally op basis van de publicatie van de onderzoekers.

← Alle berichten