跳到正文
热点事件持续更新

研究者提出GRIT框架与GRIT-Bench基准,纠正视觉语言模型视觉误读

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Chanseul Cho 等研究者发布论文,提出将视觉定位引入 RLVR 的训练框架 GRIT,并推出基准 GRIT-Bench,用以解决视觉语言模型在富文本推理中“答案正确但中间步骤视觉误读”(CVMR)的问题。 作者通过 token 级分析发现误定位 token 呈现与正确定位不同的注意力模式,GRIT 用梯度掩码抑制其影响;GRIT-Bench 则支持按文本长度和推理深度进行系统评测。论文称实验显示 GRIT 在推理准确率和定位保真度上均显著优于现有 RLVR 方法。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. arXiv cs.AI
    GRIT:用梯度掩码纠正视觉语言模型中视觉误定位 token 的富文本推理训练框架

    GRIT 是一个将视觉定位纳入 RLVR 的训练框架,针对视觉语言模型在富文本推理中“答案正确但中间步骤视觉误读”(CVMR)的问题。作者通过 token 级分析发现误定位 token 呈现与正确定位不同的注意力模式,并用梯度掩码抑制其影响,同时推出支持按文本长度和推理深度系统评测的 GRIT-Bench。实验显示 GRIT 在推理准确率和定位保真度上均显著优于现有 RLVR 方法。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。