arXiv · cs.AI· Shrestha Ghosh, Luca Giordano, Yujia Hu, Tuan-Phong Nguyen, Simon Razniewski·· 1 天前
GPTKB v1.5审计研究揭示GPT-4.1事实知识与既有知识库存在显著差异
Auditing a KB Elicitation of Frontier LLM Knowledge: A Multi-dimensional Analysis of GPTKB v1.5
arXiv:2510.07024v4阅读论文 PDF ↗
仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。
作者:Shrestha Ghosh, Luca Giordano, Yujia Hu, Tuan-Phong Nguyen, Simon Razniewski
研究任务与主要进展
作者对递归提取自GPT-4.1、包含1亿条事实或信念的GPTKB v1.5进行多维度审计,发现其内容与既有知识库差异显著,且事实准确性低于此前基准所显示的水平。基于论文摘要,研究还报告了不一致、歧义和幻觉问题。
阶段、条件与复现 · 深读核对
- 新能力对应什么具体任务与最小输入输出?
- 代码、模型、数据、许可与可用入口是否明确?
- 效果、总成本、失效条件与实际工作流如何验证?
这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。
来源:arXiv · cs.AI · arxiv.org