跳到正文
热点事件持续更新

研究提出LOWN按需视觉路由加速扩散VLM解码

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Donghyeon Cho 等研究者在 arXiv 提交论文,提出解码方法 LOWN,让 LLaDA-V 等扩散视觉语言模型按需处理图像:解码每一步自适应决定是否处理图像以及解码多少 token。实测发现去掉图像仅影响平均 22.8%、最低 7.9% 步骤的预测,LOWN 据此跳过不必要的图像处理。 论文称,无需训练或调阈值,LOWN 在十个基准上保留 LLaDA-V 得分的 99.6%,平均仅用 35.3% 的解码 FLOPs;该方法可推广到基于 LLaDA 的扩散视觉语言模型,并可与视觉 token 剪枝正交组合、配合 KV cache 进一步提效。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv cs.AI
    LOWN:按需视觉路由让 Diffusion VLM 解码更高效

    一项研究提出解码方法 LOWN,让 LLaDA-V 等扩散视觉语言模型仅在需要时处理图像。实测发现去掉图像仅在平均 22.8%、最低 7.9% 的步骤影响预测,LLOWN 按此自适应决定是否处理图像及每步解码的 token 数。无需训练或调阈值,LLOWN 在十个基准上保留 99.6% 得分,平均仅用 35.3% 的解码 FLOPs,并可与视觉 token 剪枝和 KV cache 正交组合。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。