arXiv · cs.AI· Brandon Colelough, Vladimir Martirosyan, Ishan Tamrakar, William Regli, Aditya Kumar, Anh N. Nhu, Dhruv Dubey, Raj Ambavane, Haowei Deng·· 2 天前
神经符号AI文献可复现率仅6.52%,研究提出六阶段审计框架
6.5% of the Neuro-Symbolic Literature Can Be Reproduced from Its Published Artifacts, a Six-Stage Audit Framework and First Instantiation
arXiv:2608.26236v2阅读论文 PDF ↗
仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。
作者:Brandon Colelough, Vladimir Martirosyan, Ishan Tamrakar, William Regli, Aditya Kumar, Anh N. Nhu, Dhruv Dubey, Raj Ambavane, Haowei Deng
研究任务与主要进展
基于论文摘要,作者提出面向科研文献可复现性的六阶段审计框架,并将其应用于神经符号AI领域。审计覆盖1,304篇合格记录,最终完全或部分复现85篇,占合格语料的6.52%、尝试复现的18.68%;另有321篇因缺少非代码制品、42篇因缺少或无法使用代码仓库而受阻。作者据此建议未来论文投稿时提供完整、版本化且永久存档的制品包。
阶段、条件与复现 · 深读核对
- 新能力对应什么具体任务与最小输入输出?
- 代码、模型、数据、许可与可用入口是否明确?
- 效果、总成本、失效条件与实际工作流如何验证?
这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。
来源:arXiv · cs.AI · arxiv.org