跳到正文
热点事件观察中

3R-Bench:对话历史显著改变LLM网络安全协助边界

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

Rui Yang等人发布3R-Bench基准,用150个现实网络安全请求、8个LLM和两种预设对话设置,评估直接提示与不同对话历史下模型对网络安全请求的协助边界。 结果显示对话历史明显改变遵从率:在400组匹配的模糊请求上,直接提示遵从率为75.3%,有拒绝先例后降至57.8%,有接受先例后升至81.0%;另一组75个请求的实验中,遵从率从中性任务分解对话后的74.2%降至57.2%,失败结束对话后降至60.3%。

AI 根据报道生成 · 1 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv · cs.AI
    3R-Bench评估对话历史对网络安全请求协助边界的影响

    Rui Yang等人提出3R-Bench基准,用150个现实网络安全请求、8个LLM及两种预设对话设置,评估直接提示与不同对话历史下的协助边界。对400组匹配的模糊请求,遵从率从直接提示的75.3%降至拒绝先例后的57.8%,而接受先例后升至81.0%;另一组75请求实验中,遵从率从74.2%降至中性任务分解对话后的57.2%和失败结束对话后的60.3%。

本事件热度走势

可比范围当前
4
可比范围峰值
910月15日 14:00
近 24 小时变化
-49%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。