Vídeos Egocêntricos para Treinamento de Robôs 🧵 Pesquisadores da NYU e da UC Berkeley publicaram uma pesquisa onde desenvolveram um sistema chamado EgoZero que treina robôs usando vídeos de demonstração humana gravados com óculos inteligentes. 👓 O sistema converte ações humanas em primeira pessoa em representações de estado-ação baseadas em pontos 3D. As políticas executadas em um robô equipado com garra alcançaram uma taxa de sucesso de 70% em zero-shot em sete tarefas de manipulação, com apenas 20 minutos de dados humanos por tarefa. EgoZero se destaca como uma das provas empíricas sólidas de que vídeos coletados de comportamento humano cotidiano com óculos inteligentes egocêntricos podem servir como dados de treinamento poderosos e escaláveis para o aprendizado real de robôs. @vincentjliu @AdemiAdeniji