跳到正文
arXiv · cs.AI· Alexander Spangher, Sheldon S. Huang, Andreas Haupt, Noah D. Goodman, Diyi Yang, Daniel E. Ho, Sanmi Koyejo·· 2 天前

论文提出 CreativePreferences 数据集,测量偏好中不可言说与不可验证的成分

Verifiable, Articulable, and Tacit Components of Preference

arXiv:2610.03025v2阅读论文 PDF ↗

仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。

作者:Alexander Spangher, Sheldon S. Huang, Andreas Haupt, Noah D. Goodman, Diyi Yang, Daniel E. Ho, Sanmi Koyejo

研究任务与主要进展

作者推出 CreativePreferences 偏好数据集,包含7个创意领域的2.8M文本、317M次人类偏好判断和42个基准任务,并用可执行程序、评分标准库及密集训练模型分别建模偏好中的可验证、可言说和隐性成分。基于论文摘要,作者报告所有领域均存在可言说性缺口和可验证性缺口,且部分缺口会随更多判断者参与而扩大;完整模型更接近人类生成内容中的偏好,但显式表述标准可能使偏好偏离隐性维度。

阶段、条件与复现 · 深读核对

  • 新能力对应什么具体任务与最小输入输出?
  • 代码、模型、数据、许可与可用入口是否明确?
  • 效果、总成本、失效条件与实际工作流如何验证?

这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。

来源:arXiv · cs.AI · arxiv.org