跳到正文
热点事件持续更新

提出SCUR方法评估LLM裁判实例级可靠性

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Yang Ba、Michelle V. Mancenido和Rong Pan在arXiv发布论文,提出Structured Cross-fitted Uncertainty Risk(SCUR),一种无需标签的方法,通过评审面板的行为估计LLM评审对单个样本的评估可靠性。 作者在五个真实基准上评估SCUR,任务包括多数投票错误排序、选择性信任和风险分层。材料基于论文摘要,未说明与基线方法的数值比较结果。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月14日
  1. arXiv · cs.AI
    SCUR用评审面板行为评估LLM评审的单样本可靠性

    Yang Ba、Michelle V. Mancenciado和Rong Pan提出Structured Cross-fitted Uncertainty Risk(SCUR),用于估计LLM评审对单个样本的评估可靠性。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。