跳到正文
热点事件持续更新

百度发布FDE-Bench,Agent端到端交付最高得分仅0.55

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

百度在arXiv发布FDE-Bench,称其为首个基于真实客户项目构建的基准,用于评估Agent通过需求澄清与迭代优化完成端到端交付的能力。 该基准包含49个组合优化与机器学习案例,Agent需从模拟客户处澄清缺失需求,由案例专用评估器以客户认可的FDE方案(得分1.0)为质量参考评判最终交付物。在18种Agent配置中,最高平均交付分数为0.5510,最高交付成功率为6.12%。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月14日
  1. arXiv · cs.AI
    FDE-Bench:评估Agent从欠明确真实业务需求到端到端交付

    作者提出FDE-Bench,用于评估Agent在真实客户项目中通过需求澄清和迭代优化完成端到端交付的能力。该基准包含49个组合优化与机器学习案例,并以客户认可的FDE方案作为质量参考;18种Agent配置中最高平均交付分数为0.5510,最高交付成功率为6.12%,而FDE参考得分为1.0。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。