跳到正文
arXiv cs.RO 机器人学· Diyuan Shi, Yiqi Tang, Hongyin Zhang, You Wu, Donglin Wang·· 2 小时前精选AI 评分55

VLRLA:通过上下文强化学习实现 VLA 模型的部署期适应

VLRLA: Deployment-Time Adaptation of Vision-Language-Action Models through In-Context Reinforcement Learning

AI 导读

VLRLA 提出一个通用框架,为现有 VLA 模型加入上下文强化学习能力,使其在部署期通过历史观测、动作、奖励和终止信号持续改进动作生成并提升任务成功率,同时保持模型参数固定。该方法兼容多种学习历史构建策略与训练流程,实验在仿真中系统研究了其学习特性,并在真实部署中展示了对未见场景的适应能力。

推荐理由

论文指出预训练 VLA 策略缺少部署期随交互经验逐步适应的机制,可据此理解该框架要补的缺口。

来源:arXiv cs.RO 机器人学 · arxiv.org