跳到正文
arXiv cs.RO 机器人学· Nie Lin, Takehiko Ohkawa, Sijin Chen, Ruoshi Wen, Zhuohang Li, Liqun Huang, Zhengming Zhu, Yiming Bao, Yunfei Li, Minjie Cai, Xiao Ma, Wei Xu, Yoichi Sato·· 5 小时前精选AI 评分57

SiMDex:用相似人类视频挖掘提升跨本体灵巧操作 VLA 表现

SiMDex: Mining Similar Egocentric Videos for Cross-Embodiment Dexterous Manipulation

AI 导读

SiMDex 提出一个基于相似度的数据挖掘框架,把灵巧操作 VLA 后训练的人类数据选择转化为推荐问题,在约 32M 俯视人类样本上执行召回、排序、重排序三级流程,其中召回与排序在形态无关的动作空间进行,重排序在像素上验证,不改动 VLA 架构与训练。

推荐理由

论文给出从32M样本中挖出约1.49M数据即提升成功率的完整方案,可迁移其数据筛选思路。

来源:arXiv cs.RO 机器人学 · arxiv.org