跳到正文
arXiv cs.RO 机器人学· Jeongeun Park, Taekyung Kim, Dongyoon Han, Sangdoo Yun·· 5 小时前精选AI 评分57

WATCH:从任务配对人类视频中学习可迁移的世界-动作模型

Learning Transferable World-Action Models from Task-Paired Human Videos

AI 导读

论文提出跨视频预训练方法 WATCH,以跨环境采集的任务配对人类演示为训练数据,条件于一段演示的视频与动作,联合预测另一段演示的动作和未来帧,从而学习可跨场景与跨本体迁移的任务相关交互,无需配对的人机演示。

推荐理由

论文用跨视频预测替代常规帧预测,给出了在未见机器人上动作与视频预测改善的对照数据。

来源:arXiv cs.RO 机器人学 · arxiv.org