研究揭示视觉语言模型多证据整合缺口

Yuyang Dai 等在 arXiv 发布论文，研究视觉语言模型的“多证据整合缺口”，通过子集选择和路径查找任务将局部事实恢复与全局决策有效性关联起来。 结果显示，即使模型能准确恢复局部事实，全局决策仍大量失败：Gemma-3-27B 在八项视觉实例上局部事实全部正确，全局有效率仅 19.75%。隐藏状态探针能解码答案相关信息，激活替换可在一定深度范围内恢复失败决策。作者据此称，恢复事实并表征解相关信息不足以支撑可靠的联合决策。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。