统一多模态模型提出视觉拒答基准与训练方法

Chufan Shi等提出Draw-or-Decline基准，用于评估统一多模态模型完成可行视觉编辑并拒绝不可行请求的能力，并提出VisTA训练方法。基于论文摘要，VisTA-BAGEL在无需额外提醒时拒绝93.0%的不可行请求、误拒0.8%的可行请求，并完成74.3%的可行编辑；其拒答率高于所评估8个模型中最强编辑器的0.4%。 该基准包含7类任务、1050组可行—不可行请求配对；上述结果目前仅来自论文摘要及所给实验设置，尚不能视为独立复现。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。