跳到正文
arXiv · cs.AI· Rui Yang, Yang Hong, Yichao Xu, Zhengyu Liu, Yinzhi Cao, Ziyang Li·· 1 天前

3R-Bench评估对话历史对网络安全请求协助边界的影响

Same Request, Different Boundary: Evaluating Cybersecurity Assistance across Conversational Contexts

arXiv:2609.00578v2阅读论文 PDF ↗

仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。

作者:Rui Yang, Yang Hong, Yichao Xu, Zhengyu Liu, Yinzhi Cao, Ziyang Li

研究任务与主要进展

Rui Yang等人提出3R-Bench基准,用150个现实网络安全请求、8个LLM及两种预设对话设置,评估直接提示与不同对话历史下的协助边界。对400组匹配的模糊请求,遵从率从直接提示的75.3%降至拒绝先例后的57.8%,而接受先例后升至81.0%;另一组75请求实验中,遵从率从74.2%降至中性任务分解对话后的57.2%和失败结束对话后的60.3%。

阶段、条件与复现 · 深读核对

  • 新能力对应什么具体任务与最小输入输出?
  • 代码、模型、数据、许可与可用入口是否明确?
  • 效果、总成本、失效条件与实际工作流如何验证?

这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。

来源:arXiv · cs.AI · arxiv.org