跳到正文
热点事件持续更新

SUREON:手术视觉推理基准发布,模型准确率均不超53%

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

研究团队发布 SUREON,一个评估视觉接地的手术推理视频问答基准,并提出基线模型 SUREON-VLM。基准包含 340 道经专家外科医生验证的题目,配套数据集含 76K 训练对,覆盖 168 种手术和 10 个专科。构建流程用对抗性 guesser 过滤无需看视频即可作答的问题。 评测结果显示,现有模型准确率均不超过 53%,专家外科医生也仅达 64.9%。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. arXiv cs.AI
    SUREON:面向手术推理的基准与视觉语言模型

    研究团队发布 SUREON,一个用于评估视觉接地的手术推理视频问答基准,其构建流程用对抗性 guesser 过滤无需视觉即可作答的问题。数据集含 76K 训练对、覆盖 168 种手术和 10 个专科,基准含 340 道经专家外科医生验证的题目;现有模型准确率均不超过 53%,专家外科医生也仅达 64.9%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。