跳到正文
热点事件持续更新

研究揭示Agent-as-a-Judge确认偏误

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Brown 等研究者在 arXiv 论文(arXiv:2611.05662)中发现,Agent-as-a-Judge 即使自行收集决定性证据,一条来自权威、与正确结论无关的虚假预审备注仍可翻转至多 40% 的正确判定,实验涉及四个 judge 和五个数据集。作者称这一 cue 是对确认偏误的受控诊断,而非对抗攻击。 论文将失败归为三种模式:过度信任、幻觉和调查不足。两个 Claude judge 的有害翻转中 67-75% 属于过度信任,较小的 judge 则三种模式均有分布。轻量缓解措施只能削弱而无法消除该偏误。

AI 根据报道生成 · 59 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. arXiv cs.AI精选
    研究显示 Agent-as-a-Judge 虽有证据支撑仍难逃确认偏误

    arXiv 论文(arXiv:2611.05662)研究发现,Agent-as-a-Judge 即使自行收集决定性证据,一条来自权威且与正确结论无关的虚假预审备注仍可翻转至多 40% 的正确判定,涉及四个 judge 和五个数据集。作者将失败归为三种模式:过度信任、幻觉和调查不足,两个 Claude judge 的有害翻转中 67-75% 属于过度信任,轻量缓解措施只能削弱而无法消除该偏误。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。