跳到正文
热点事件持续更新

BedBench基准揭示视觉语言模型3D推理短板

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Khai Le-Duc等研究者发布BedBench基准论文(arXiv:2610.39639),用13个程序生成任务检验视觉语言模型的3D推理,结论是当前模型与人类差距悬殊:逐色计数任务上人类准确率93.3%,最好的模型仅7.2%。 论文还分析了失败模式:微调可把一个模型的成绩从3.0%提升到68.6%,但其给出的答案仍与自身的计数结果不一致。代码和数据集已公开,论文为150页预印本。

AI 根据报道生成 · 56 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月31日
  1. arXiv cs.AI
    BedBench 论文揭示视觉语言模型在 3D 推理中的失败模式

    研究团队发布 BedBench 基准,用 13 个程序生成任务检验视觉语言模型的 3D 推理。逐色计数上人类准确率 93.3%,最好的模型仅 7.2%;微调可将一个模型从 3.0% 提升到 68.6%,但其答案仍与自身计数不一致。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。