跳到正文
arXiv · cs.AI· Qiaoru Li, Shaotian Liang, Jintao Chen, Haoran Sun, Yuxiang Cai, Jianwei Yin, Yankai Jiang·· 5 小时前

VITAL通过视觉—语义双重监督增强医学多模态模型的潜在推理与可解释性

VITAL: Visual-Semantic Dual Supervision for Enhanced and Interpretable Latent Reasoning in Medical MLLMs

arXiv:2605.28422v2阅读论文 PDF ↗

仅依据论文摘要整理;未读取全文,实验条件、证明与基准细节请核对原文。

作者:Qiaoru Li, Shaotian Liang, Jintao Chen, Haoran Sun, Yuxiang Cai, Jianwei Yin, Yankai Jiang

研究任务与主要进展

Qiaoru Li等人提出VITAL,一种面向医学多模态大模型的潜在空间推理框架,利用辅助文本解码器重构推理链,并用视觉投影器从冻结的独立医学视觉编码器回归ROI特征。作者构建了覆盖9种成像模态的6.1万规模数据集,并在7个基准上报告VITAL优于骨干模型、其他潜在推理基线以及使用更大数据训练的医学多模态模型;两个辅助模块推理时可移除,事后可重新接入以提供文本和视觉解释。

阶段、条件与复现 · 深读核对

  • 新能力对应什么具体任务与最小输入输出?
  • 代码、模型、数据、许可与可用入口是否明确?
  • 效果、总成本、失效条件与实际工作流如何验证?

这些是阅读核对问题;材料未说明的条件保留未知。请结合上方论文版本、资料范围与原文核验。

来源:arXiv · cs.AI · arxiv.org