审计发现微服务RCA基准排行榜缺乏可复现依据

Lining Hu、Ting Liu、Yuzhuo Fu 在一篇arXiv论文（基于摘要）中审计了OpenRCA、RCAEval和PetShop三个公开微服务根因分析（RCA）基准，在记录配置下运行16个方法的发布实现，覆盖11个子系统和三个应用的第二个发布版本，比较方法跨子系统排名变化及分数生成过程。作者称，在所查的23篇RCA论文中，没有一篇公开核对排行榜前提所需的逐案例输出；并在若干子系统上，简单探针或随基准附带的基线方法胜过所有已发表方法。 该审计的结论是：跨方法的汇总排行榜未说明比较的范围与来源，方法排名在不同子系统间存在变化，且现有论文未提供足以复核评分产生的数据。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。