跳到正文
arXiv cs.RO 机器人学· Julia Barth, Armin Sommer, Kunvar Thaman, Jannik Schilling·· 2 小时前精选AI 评分57

arXiv 论文解析目标错配中策略对齐的三类不同失效

What Happens to the Goal? Distinct Failures of Policy Alignment in Goal Misgeneralization

AI 导读

论文在三个 Procgen 环境和五个机器人任务中发现目标错配存在三种策略-目标失配形式:功能目标替代、策略捷径、以及意图目标与代理目标线索之间的线索竞争,目标信息在内部丢失的深度各不相同。

推荐理由

论文把目标错配细分为三类并给出对应恢复手段的量化效果,做对齐复现的团队可据此选择干预位置。

来源:arXiv cs.RO 机器人学 · arxiv.org