RoboRender用生成视频缩小机器人视觉sim-to-real差距
热点事件持续更新
RoboRender用生成视频缩小机器人视觉sim-to-real差距
1 篇报道1 个报道来源7 小时前更新
先了解这件事
AI 综述
Huang Huang 等人提出 RoboRender 框架,把模拟轨迹转换成照片级 RGB 视频用于训练机器人策略。该模型以模拟深度视频、语言指令和机器人 RGB mask 视频为条件,在保留模拟器几何、机器人运动和动作标签的同时合成真实纹理、背景与干扰物。 在抓取放置、铰接物体操作和移动操作的真实实验中,用 RoboRender 生成数据训练的策略平均成功率达 71%,作者称分别约为原始模拟渲染和常规视觉域随机化的 7.1 倍与 3.6 倍;每条模拟轨迹生成更多视频可使开合任务成功率提高 65 个百分点。
AI 根据报道生成 · 7 小时前更新
最新进展10月8日 12:00
RoboRender:面向机器人的视频生成实现视觉 sim-to-real 迁移报道时间线
沿着报道,了解事件的不同侧面。
10月8日
- arXiv cs.RO 机器人学RoboRender:面向机器人的视频生成实现视觉 sim-to-real 迁移
RoboRender 是一个将模拟轨迹转换为照片级 RGB 视频的框架,以模拟深度视频、语言指令和机器人 RGB mask 视频为条件训练面向机器人的视频生成模型,在保留模拟器几何、机器人运动和动作标签的同时合成真实纹理、背景与干扰物。
本事件热度走势
- 可比范围当前
- 8
- 可比范围峰值
- 1010月8日 13:00
- 近 24 小时变化
- –
02.557.510
13:0014:0015:0016:0017:0018:0019:00
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。