跳到正文
热点事件持续更新

研究指自适应实验可掩盖模型误差并推导检测能力上界

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Ramnarayan Choudhary 在 arXiv 发表论文指出:自适应实验设计会反复选中错误模型也能拟合的设置,从而掩盖模型误差;作者据此推导了任何有效性检验的检测能力上界,并提出保留部分设计预算用于证伪的免训练规则。 实证结果有限:校准后的修订版在 T=240 时检出 35.8% 的误设实验(对照组为 31.7%),但在 T=480 时无确定优势。作者称,这些结果支持将参数学习、模型检验与检测器性能分开评估,并未确立一种普遍更优的设计策略。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. arXiv cs.AI
    自适应实验可能掩盖模型误差:检测极限与证伪预算

    一篇 arXiv 论文指出,自适应实验设计会反复选择错误模型也能拟合的设置,从而掩盖模型误差。作者推导了任何有效性检验的检测能力上界,并提出保留部分设计预算用于证伪的免训练规则。校准后的修订版在 T = 240 时检出 35.8% 的误设实验(对照组为 31.7%),但 T = 480 时无确定优势。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。