自我中心視頻用於機器人訓練 🧵 紐約大學和加州大學伯克利分校的研究人員發布了一項研究，開發了一種名為EgoZero的系統，該系統使用通過智能眼鏡錄製的人類示範視頻來訓練機器人。👓 該系統將第一人稱的人類動作轉換為基於3D點的狀態-動作表示。在配備抓手的機器人上執行的策略，在七個操作任務中實現了70%的零樣本成功率，每個任務僅需20分鐘的人類數據。 EgoZero是自我中心智能眼鏡視頻的有力實證證明，這些視頻來自日常人類行為，可以作為強大且可擴展的訓練數據，用於真實的機器人學習。 @vincentjliu @AdemiAdeniji