推理引导翻译构建11语种安全与推理评测集

Zahraa Al Sahili、Ioannis Patras 和 Matthew Purver 提出推理引导翻译框架，用于在翻译基准任务时保持其结构和预期含义，并据此构建了一个覆盖7个安全、会话与数学推理资源、11种语言的源对齐评测集。 基于论文摘要，在需要修复的两个子集中，预设条目—语言对覆盖率达99.94%。对开源大语言模型的评测显示，不同语言间拒答行为不一致，低资源语言中出现明显推理退化。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。