arXiv · cs.AI· Nishal Thomas, Noel Thomas·· 6 小时前
FormInv提出数学推理基准语义不变性测量协议
FormInv: A Measurement Protocol for Semantic Invariance in Mathematical Reasoning Benchmarks
arXiv:2605.29001v2阅读论文 PDF ↗
仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。
作者:Nishal Thomas, Noel Thomas
研究任务与主要进展
Nishal Thomas和Noel Thomas提出FormInv协议,用于审计数学推理基准中的语义等价改写,并引入Conditional Inconsistency Rate(CIR)和Semantic Consistency Rate(SCR)衡量模型答案不变性。
阶段、条件与复现 · 深读核对
- 新能力对应什么具体任务与最小输入输出?
- 代码、模型、数据、许可与可用入口是否明确?
- 效果、总成本、失效条件与实际工作流如何验证?
这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。
来源:arXiv · cs.AI · arxiv.org