跳到正文
热点事件持续更新

XL-SafetyBench:10国语言对的LLM跨文化安全基准

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Dasol Choi等人在arXiv发布XL-SafetyBench,一个覆盖10个国家与语言对、共5,500条测试用例的LLM安全与文化敏感性基准,包含国别化越狱提示的越狱基准和把当地敏感性嵌入日常请求的文化基准两部分。测试用例经多阶段流程构建,结合LLM辅助发现、自动验证和每国两名独立母语标注者。 研究用ASR、NSR和CSR三个指标区分安全拒答、非参与和敏感性识别,评估了10个前沿模型与27个本地模型。结果显示,越狱鲁棒性不总与文化意识同步,本地模型的ASR与NSR相关系数为-0.81。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月14日
  1. arXiv · cs.AI
    XL-SafetyBench:面向LLM安全与文化敏感性的国别跨文化基准

    Dasol Choi等人提出XL-SafetyBench,包含10个国家与语言对的5,500个测试用例,分别评估国别化越狱提示和嵌入日常请求中的文化敏感性。研究评估10个前沿模型与27个本地模型,并通过ASR、NSR和CSR区分安全拒答、非参与和敏感性识别。结果显示,越狱鲁棒性不总与文化意识同步,本地模型的ASR与NSR相关系数为-0.81。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。