Egosentriske videoer for robottrening 🧵 Forskere ved NYU og UC Berkeley publiserte forskning der de utviklet et system kalt EgoZero som trener roboter ved hjelp av menneskelige demonstrasjonsvideoer tatt opp med smarte briller. 👓 Systemet konverterer førstepersons menneskelige handlinger til 3D-punktbaserte tilstandshandlingsrepresentasjoner. Retningslinjene som ble utført på en griperutstyrt robot, oppnådde en suksessrate på 70 % nullskudd på tvers av syv manipulasjonsoppgaver, med bare 20 minutter med menneskelige data per oppgave. EgoZero står som et av de solide empiriske bevisene på at egosentrisk smartglassvideo samlet inn fra daglig menneskelig atferd kan tjene som kraftige, skalerbare treningsdata for ekte robotlæring. @vincentjliu @AdemiAdeniji