提出GatewayBench基准统一评测MCP网关
热点事件持续更新
提出GatewayBench基准统一评测MCP网关
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
芝加哥大学等机构作者(Yitian Zheng、Zhaorun Chen、Haoyu Li、Bo Li等)发布GatewayBench,作者称为首个统一评估MCP网关的基准,用于衡量网关对Agent能力、效率和安全韧性的影响。基准包含六个领域的524项任务,以及来自251个真实MCP服务器的11,118个工具。 作者在七种已部署的MCP网关和不同Agent配置下进行了正常与对抗任务实验,结果显示网关设计会显著影响任务完成、工具使用效率和抗攻击能力,且这些影响与底层模型及Agent harness相互作用。该结论基于arXiv论文的作者实验,尚属论文声称阶段。
AI 根据报道生成 · 2 小时前更新
最新进展10月19日 12:00
GatewayBench:统一评估 MCP 网关能力与安全性的基准平台报道时间线
沿着报道,了解事件的不同侧面。
10月19日
- arXiv · cs.AIGatewayBench:统一评估 MCP 网关能力与安全性的基准平台
作者提出 GatewayBench,用于统一评估 MCP 网关对 Agent 能力、效率和安全韧性的影响。基准包含六个领域的524项任务,以及来自251个真实 MCP 服务器的11,118个工具,并在七种已部署 MCP 网关和不同 Agent 配置下开展正常与对抗任务实验;结果显示,网关设计会显著影响任务完成、工具使用效率和抗攻击能力,且这些影响与底层模型及 Agent harness 相互作用。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。