Video Tự Trung Tâm cho Đào Tạo Robot 🧵 Các nhà nghiên cứu tại NYU và UC Berkeley đã công bố nghiên cứu nơi họ phát triển một hệ thống gọi là EgoZero, hệ thống này đào tạo robot bằng cách sử dụng video trình diễn của con người được ghi lại bằng kính thông minh. 👓 Hệ thống chuyển đổi các hành động của con người từ góc nhìn thứ nhất thành các đại diện trạng thái-hành động dựa trên điểm 3D. Các chính sách được thực hiện trên một robot trang bị kẹp, đạt tỷ lệ thành công 70% trong điều kiện không có dữ liệu trước (zero-shot) qua bảy nhiệm vụ thao tác, chỉ với 20 phút dữ liệu của con người cho mỗi nhiệm vụ. EgoZero là một trong những bằng chứng thực nghiệm vững chắc rằng video từ kính thông minh tự trung tâm được thu thập từ hành vi con người hàng ngày có thể phục vụ như dữ liệu đào tạo mạnh mẽ, có thể mở rộng cho việc học robot thực sự. @vincentjliu @AdemiAdeniji
12,79K