提出StepSafe步级干预护栏与ASPO训练框架
热点事件持续更新
提出StepSafe步级干预护栏与ASPO训练框架
1 篇报道1 个报道来源6 小时前更新
先了解这件事
AI 综述
Yale等机构的Siyi Gu等研究者在arXiv论文中提出StepSafe,一个步级安全推理护栏,用于按步骤预测智能体何时应继续、询问或停止,实现及时干预;并配套ASPO训练框架。作者称其在五个agent安全基准上达到开源护栏中最优的安全-效用Pareto表现,4B模型的Youden's J为53.0(对比46.2)。上述性能为论文作者声称,本站未独立核验。 方法上,ASPO通过前缀阶段对齐分配决策信用,让模型利用干预步骤标注和自身误报规则进行反馈自蒸馏;训练数据包含违规分类与每步干预窗口,并通过自演化多智能体红队扩展。
AI 根据报道生成 · 3 小时前更新
最新进展10月16日 12:00
StepSafe:通过上下文感知安全推理学习及时干预报道时间线
沿着报道,了解事件的不同侧面。
10月16日
- arXiv · cs.AIStepSafe:通过上下文感知安全推理学习及时干预
Siyi Gu等提出StepSafe与ASPO训练框架,用于按步骤预测智能体何时应继续、询问或停止,以实现及时干预。ASPO通过前缀阶段对齐分配决策信用,并让模型利用干预步骤标注和自身误报规则进行反馈自蒸馏;训练数据包含违规分类与每步干预窗口,并通过自演化多智能体红队扩展。
本事件热度走势
- 可比范围当前
- 8
- 可比范围峰值
- 910月16日 16:00
- 近 24 小时变化
- –
02.557.510
16:0017:0018:00
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。