Egocentrische Video's voor Robottraining 🧵 Onderzoekers van NYU en UC Berkeley hebben onderzoek gepubliceerd waarin ze een systeem hebben ontwikkeld genaamd EgoZero, dat robots traint met behulp van menselijke demonstratievideo's die zijn opgenomen met slimme brillen. 👓 Het systeem zet eerstepersoons menselijke acties om in 3D punt-gebaseerde staat-acties representaties. De beleidsmaatregelen die op een robot met grijper zijn uitgevoerd, behaalden een succespercentage van 70% in een zero-shot scenario over zeven manipulatie taken, met slechts 20 minuten aan menselijke data per taak. EgoZero staat als een van de solide empirische bewijzen dat egocentrische video’s van slimme brillen, verzameld uit alledaags menselijk gedrag, kunnen dienen als krachtige, schaalbare trainingsdata voor echte robotleren. @vincentjliu @AdemiAdeniji