跳到正文
热点事件持续更新

普林斯顿发布SSoN基准,AI空间智能远逊人类

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

普林斯顿 AI Lab 团队发布空间智能基准 Same Space or Not(SSoN),要求模型从四张静态室内图像中找出违背同一场景的一张并给出解释。评测结果显示人类准确率为 83.3%,而受测的六个视觉语言模型中最高的是 GPT-6 Astra Pro,准确率仅 39.7%。 该基准去掉了实时变化和动作控制,只保留静态图像判断。除 GPT-6 Astra Pro 外,其余五个模型准确率均低于 25% 的随机基线;用 17 个视觉编码器做相似度选离群的方法也全部低于随机线,表明当前模型在此类空间判断能力上明显不足。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. 36氪 · AI
    普林斯顿 AI Lab 发布空间智能基准 SSoN:人类 83.3%,最高模型仅 39.7%

    普林斯顿 AI Lab 团队发布空间智能基准 Same Space or Not(SSoN),要求模型从四张静态室内图像中找出违背同一场景的一张并给出解释。完整 1,000 题上人类准确率 83.3%,六个受测视觉语言模型中 GPT-6 Astra Pro 以 39.7% 领先,其余五个低于 25% 随机基线;17 个视觉编码器的相似度选离群方法也全部低于随机线。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。