arXiv · cs.AI· Jiaqi Xiong, Yunjia Qi, Qi Cao, Yu Zheng, Yutong Zhang, Ziteng Wang, Ruofan Liao, Weisheng Xu, Sichen Liu·· 5 小时前
DEAF:音频语言模型声学忠实性诊断评测基准
DEAF: A Benchmark for Diagnostic Evaluation of Acoustic Faithfulness in Audio Language Models
arXiv:2603.18048v3阅读论文 PDF ↗
仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。
作者:Jiaqi Xiong, Yunjia Qi, Qi Cao, Yu Zheng, Yutong Zhang, Ziteng Wang, Ruofan Liao, Weisheng Xu, Sichen Liu
研究任务与主要进展
基于论文摘要,作者提出 DEAF 基准,包含超过 2,700 个覆盖情感韵律、背景声音和说话者身份的冲突刺激,用于诊断音频语言模型是否真正利用声学信号。研究设计了逐步增加文本影响的评测框架和诊断指标;对七个 Audio MLLMs 的评测显示,模型能感知声学变化,但预测主要受文本输入驱动。
阶段、条件与复现 · 深读核对
- 新能力对应什么具体任务与最小输入输出?
- 代码、模型、数据、许可与可用入口是否明确?
- 效果、总成本、失效条件与实际工作流如何验证?
这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。
来源:arXiv · cs.AI · arxiv.org