跳到正文
热点事件持续更新

研究称输出层评估系统性高估机器遗忘效果

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

马来西亚大学研究者 Teresa Pui Yee Yong、Win Kent Ong、Chee Seng Chan 在 arXiv 论文《Erased, but Not Gone: Output Forgetting Is Not True Forgetting》(v2)中提出:常用机器遗忘方法的输出层评估会系统性高估遗忘成功,遗忘并不等于真正遗忘。 他们以从头重训练(不含遗忘数据)的模型群体作为理想遗忘的参照分布,提出表示空间中的重训练一致性评估。基于论文摘要的实验显示,多种遗忘方法、数据集和模型下,模型在遗忘样本上部分接近重训练结果,但在保留样本上仍与重训练模型更不一致,残余差异沿重训练相关方向集中分布。 作者称,这些差异在许多情况下超过独立重训练之间的变异,并可能在再学习攻击中增加信息恢复风险。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. arXiv · cs.AI
    机器遗忘中的输出遗忘不等于真正遗忘

    基于论文摘要,研究作者以从头重训练模型作为理想遗忘的参照,分析多种机器遗忘方法在表示空间中的重训练一致性,并发现标准输出层评估可能系统性高估遗忘效果。实验显示,模型在遗忘样本上部分接近重训练结果,但在保留样本上仍更不一致,残余差异沿重训练相关方向呈现集中分布;在许多情况下,这些差异超过独立重训练的变异,并可能增加再学习攻击中的信息恢复风险。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。