CroissantMiner发布元数据抽取基准

Berke Arda等作者发布CroissantMiner，用于端到端评估机器学习数据集Croissant元数据抽取，并同步开放评测代码、审查材料、在线演示和排行榜。据论文摘要，基准收录602篇论文，其中102篇有人工验证的gold标注、500篇有LLM生成的silver标注，覆盖Croissant核心模式及负责任AI字段。 作者使用该基准评测了前沿模型、开放权重模型和智能体架构，采用规则评分与经人工审查选定的LLM评审相结合的两层评测框架；目前材料未给出具体系统的排名结论。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。