Egocentriska videor för robotträning 🧵 Forskare vid NYU och UC Berkeley publicerade forskning där de utvecklade ett system som heter EgoZero som tränar robotar med hjälp av mänskliga demonstrationsvideor inspelade med smarta glasögon. 👓 Systemet omvandlar mänskliga handlingar i första person till punktbaserade 3D-representationer av tillståndsåtgärder. Policyerna som utfördes på en gripdonsutrustad robot uppnådde en 70-procentig framgångsfrekvens med noll skott för sju manipulationsuppgifter, med endast 20 minuters mänsklig data per uppgift. EgoZero är ett av de solida empiriska bevisen för att egocentrisk video med smarta glas som samlats in från mänskligt beteende i vardagen kan fungera som kraftfulla, skalbara träningsdata för verklig robotinlärning. @vincentjliu @AdemiAdeniji