arXiv cs.RO 机器人学· Junxiang Wang, Yuchen Liu, Yi Wu, Guofei Chen, Nir Pechuk, Tao Chen, Zackory Erickson, Yuzhe Qin, Tianyu Li·· 2 小时前AI 评分55
MeMoREval:面向具身智能体的记忆模态基准评测
What Should Embodied Agents Remember? Benchmarking and Evaluating Memory Modality for Embodied Agents
AI 导读
论文提出 MeMoREval 基准,通过受控的经验-请求协议评测具身智能体的记忆模态选择,涵盖 4 个模拟室内环境共 53 项任务,同时度量任务成功率与记忆构建、使用的推理成本。参考评测显示,存储帧比存储生成描述在主模型上以更低的写入推理成本取得更好效果,而存储帧加场景图在所有受测模型上获得最高的综合任务成功率;论文还给出两项物理机器人演示以验证协议可走出仿真。
来源:arXiv cs.RO 机器人学 · arxiv.org