跳到正文
arXiv cs.RO 机器人学· Ziheng Wang, Yanming Shao, Ting Mao, Kaihan Chen, Yiqun Wang, Xuanye Wu, Yao Mu·· 5 小时前精选AI 评分57

EgoMatrix:从第一人称人类视频生成物理忠实的灵巧机器人演示

EgoMatrix: Physically Faithful Dexterous Robot Demonstrations from Egocentric Human Videos

AI 导读

EgoMatrix 是一个端到端数据引擎,把单目第一人称人类视频转换为可直接在真实机器人上重放的双臂灵巧轨迹和配对的机器人观测视频。它在重建手物交互时侧重相对几何与接触而非精确度量场景恢复,再通过重定向和强化学习在仿真中复现任务,并联合渲染机器人手与物体生成与状态、控制记录同步的观测。

推荐理由

论文给出端到端成功率对比与基准指标,可评估该数据引擎相对基线的实际增益。

来源:arXiv cs.RO 机器人学 · arxiv.org