研究者提出Realtime-Bench基准:实时交互最佳成功率仅44%
热点事件持续更新
研究者提出Realtime-Bench基准:实时交互最佳成功率仅44%
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
研究者发布Realtime-Bench基准,用动态任务测试实时流式模型在时间约束下行动的能力。结果显示,在环境按实际推理延迟推进的Wall Clock模式下,最佳模型成功率仅44%,最佳Pass^3仅36%。 论文还引入Paused Clock和Token Clock两种计时方式,用以分离服务延迟与时间感知的影响。研究者发现,时间成本限制会降低演进环境中的成功率,而更高的推理努力在时间压力下效果好坏参半。
AI 根据报道生成 · 45 分钟前更新
最新进展11月18日 13:00
Realtime-Bench:前沿模型能解决实时交互问题吗?报道时间线
沿着报道,了解事件的不同侧面。
11月18日
- arXiv cs.AIRealtime-Bench:前沿模型能解决实时交互问题吗?
研究者推出 Realtime-Bench 基准,用动态任务测试实时流式模型在时间约束下行动的能力。在环境按实际推理延迟推进的 Wall Clock 模式下,最佳成功率仅 44%,最佳 Pass^3 仅 36%。论文还引入 Paused Clock 和 Token Clock 两种计时方式分离服务延迟与时间感知,发现时间成本限制演进环境中的成功率,更高推理努力在时间压力下效果好坏参半。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。