跳到正文
热点事件持续更新

Probe-and-Resume论文提出终端Agent评估策略

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

Jiakai Xu 等哥伦比亚大学等作者在 arXiv 发布论文,提出终端计算机使用环境中的 Agent 评估策略 Probe-and-Resume:仅在 Agent 声称完成时调用 critic,critic 对计算机当前状态与初始状态的分叉拥有读写和执行权限进行探测,被拒绝的 Agent 从停止处恢复执行。 基于论文摘要:在 Terminal-Bench 2.1 上,该策略比使用传统 critic 的 MCTS 成功率提高 8.4 个百分点,并以不到一半的成本接近使用相同底层模型的 Codex CLI agent 的成功率;作者还发现其所评估的 MCTS 配置并不能显著提升任务成功率。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月16日
  1. arXiv · cs.AI
    Probe-and-Resume:在何时以及如何评估 Agent 执行

    基于论文摘要,Jiakai Xu 等研究终端型计算机使用环境中的 Agent 执行评估,提出 Probe-and-Resume:仅在 Agent 声称完成时调用 critic,并让其在计算机当前状态与初始状态的分叉上进行读写和执行探测;被拒绝的 Agent 则从停止处恢复。

本事件热度走势

可比范围当前
9
可比范围峰值
910月16日 14:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。