跳到正文
热点事件持续更新

RoboRender用生成视频缩小机器人视觉sim-to-real差距

1 篇报道1 个报道来源7 小时前更新

先了解这件事

AI 综述

Huang Huang 等人提出 RoboRender 框架,把模拟轨迹转换成照片级 RGB 视频用于训练机器人策略。该模型以模拟深度视频、语言指令和机器人 RGB mask 视频为条件,在保留模拟器几何、机器人运动和动作标签的同时合成真实纹理、背景与干扰物。 在抓取放置、铰接物体操作和移动操作的真实实验中,用 RoboRender 生成数据训练的策略平均成功率达 71%,作者称分别约为原始模拟渲染和常规视觉域随机化的 7.1 倍与 3.6 倍;每条模拟轨迹生成更多视频可使开合任务成功率提高 65 个百分点。

AI 根据报道生成 · 7 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. arXiv cs.RO 机器人学
    RoboRender:面向机器人的视频生成实现视觉 sim-to-real 迁移

    RoboRender 是一个将模拟轨迹转换为照片级 RGB 视频的框架,以模拟深度视频、语言指令和机器人 RGB mask 视频为条件训练面向机器人的视频生成模型,在保留模拟器几何、机器人运动和动作标签的同时合成真实纹理、背景与干扰物。

本事件热度走势

可比范围当前
8
可比范围峰值
1010月8日 13:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。