研究者提出GRIT框架与GRIT-Bench基准,纠正视觉语言模型视觉误读
热点事件持续更新
研究者提出GRIT框架与GRIT-Bench基准,纠正视觉语言模型视觉误读
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
Chanseul Cho 等研究者发布论文,提出将视觉定位引入 RLVR 的训练框架 GRIT,并推出基准 GRIT-Bench,用以解决视觉语言模型在富文本推理中“答案正确但中间步骤视觉误读”(CVMR)的问题。 作者通过 token 级分析发现误定位 token 呈现与正确定位不同的注意力模式,GRIT 用梯度掩码抑制其影响;GRIT-Bench 则支持按文本长度和推理深度进行系统评测。论文称实验显示 GRIT 在推理准确率和定位保真度上均显著优于现有 RLVR 方法。
AI 根据报道生成 · 2 小时前更新
最新进展11月3日 13:00
GRIT:用梯度掩码纠正视觉语言模型中视觉误定位 token 的富文本推理训练框架报道时间线
沿着报道,了解事件的不同侧面。
11月3日
- arXiv cs.AIGRIT:用梯度掩码纠正视觉语言模型中视觉误定位 token 的富文本推理训练框架
GRIT 是一个将视觉定位纳入 RLVR 的训练框架,针对视觉语言模型在富文本推理中“答案正确但中间步骤视觉误读”(CVMR)的问题。作者通过 token 级分析发现误定位 token 呈现与正确定位不同的注意力模式,并用梯度掩码抑制其影响,同时推出支持按文本长度和推理深度系统评测的 GRIT-Bench。实验显示 GRIT 在推理准确率和定位保真度上均显著优于现有 RLVR 方法。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。