跳到正文
arXiv · cs.AI· Shrestha Ghosh, Luca Giordano, Yujia Hu, Tuan-Phong Nguyen, Simon Razniewski·· 1 天前

GPTKB v1.5审计研究揭示GPT-4.1事实知识与既有知识库存在显著差异

Auditing a KB Elicitation of Frontier LLM Knowledge: A Multi-dimensional Analysis of GPTKB v1.5

arXiv:2510.07024v4阅读论文 PDF ↗

仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。

作者:Shrestha Ghosh, Luca Giordano, Yujia Hu, Tuan-Phong Nguyen, Simon Razniewski

研究任务与主要进展

作者对递归提取自GPT-4.1、包含1亿条事实或信念的GPTKB v1.5进行多维度审计,发现其内容与既有知识库差异显著,且事实准确性低于此前基准所显示的水平。基于论文摘要,研究还报告了不一致、歧义和幻觉问题。

阶段、条件与复现 · 深读核对

  • 新能力对应什么具体任务与最小输入输出?
  • 代码、模型、数据、许可与可用入口是否明确?
  • 效果、总成本、失效条件与实际工作流如何验证?

这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。

来源:arXiv · cs.AI · arxiv.org