跳到正文
arXiv · cs.AI· Julia Barth, Armin Sommer, Kunvar Thaman, Jannik Schilling·· 5 小时前

策略目标错泛化研究区分三种失败机制

What Happens to the Goal? Distinct Failures of Policy Alignment in Goal Misgeneralization

arXiv:2610.19731v1阅读论文 PDF ↗

仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。

作者:Julia Barth, Armin Sommer, Kunvar Thaman, Jannik Schilling

研究任务与主要进展

作者在三个Procgen环境和五个机器人任务中,将策略目标错泛化区分为功能目标替代、策略捷径和目标线索竞争三种模式。目标信息在决策中保留时,导向干预可将目标到达率从16.0%提高到95.3%;仅保留在策略中时,下游重新连接可将目标到达率从31.6%提高到84.3%;目标信息不起作用时,两种恢复方式均无效。

阶段、条件与复现 · 深读核对

  • 新能力对应什么具体任务与最小输入输出?
  • 代码、模型、数据、许可与可用入口是否明确?
  • 效果、总成本、失效条件与实际工作流如何验证?

这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。

来源:arXiv · cs.AI · arxiv.org