arXiv · Strongly Correlated Electrons· Jin Gene Wong, Anjney Midha, Joseph Mathew Tennyson, Wei-Lin Chiang, Ion Stoica, Zhi-Xun Shen·· 1 天前
CME-SpectrumBench评估LLM分析凝聚态光谱数据能力
CME-SpectrumBench: Can LLMs Analyze Condensed Matter Spectral Data?
arXiv:2610.24304v1阅读论文 PDF ↗
仅依据论文摘要整理；未读取全文，实验条件、证明与基准细节请核对原文。
作者：Jin Gene Wong, Anjney Midha, Joseph Mathew Tennyson, Wei-Lin Chiang, Ion Stoica, Zhi-Xun Shen
研究任务与主要进展
CME-SpectrumBench是一个由专家设计、包含190道题的基准，用于评估前沿LLM分析研究级凝聚态实验光谱数据的能力。模型需从含噪声且受仪器分辨率限制的二维强度数组中识别结构并计算派生量；直接查询通常弱于手写代码，接入Python解释器并结合或不结合ReAct后表现可接近手写代码。代码和数据已公开于Hugging Face。
阶段、条件与复现 · 深读核对
- 新能力对应什么具体任务与最小输入输出？
- 代码、模型、数据、许可与可用入口是否明确？
- 效果、总成本、失效条件与实际工作流如何验证？
这些是阅读核对问题；材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。
来源：arXiv · Strongly Correlated Electrons · arxiv.org