跳到正文
arXiv · cs.AI· Ruxi Gu, Zhenliang Zhang, Zilei Wang, Wei Wang·· 11 小时前

ForgetBench:评测语言模型长期参数记忆的遗忘动态

ForgetBench: Benchmarking Forgetting Dynamics of Long-Term Parametric Memory in Language Models

arXiv:2607.26455v2阅读论文 PDF ↗

仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。

作者:Ruxi Gu, Zhenliang Zhang, Zilei Wang, Wei Wang

研究任务与主要进展

作者提出ForgetBench,用于评测大语言模型在持续知识编辑过程中长期参数记忆的遗忘动态。该基准通过概念问答和情景问答,分别考察孤立事实与结构化关系知识,并按后续编辑次数衡量记忆年龄、时间衰减、保持强度和跨实例稳定性。基于论文摘要,跨模型与编辑方法的实验显示,不同遗忘轨迹之间存在差异,且长期记忆保持与泛化质量之间存在持续张力。

阶段、条件与复现 · 深读核对

  • 新能力对应什么具体任务与最小输入输出?
  • 代码、模型、数据、许可与可用入口是否明确?
  • 效果、总成本、失效条件与实际工作流如何验证?

这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。

来源:arXiv · cs.AI · arxiv.org