发布Ask2Decide基准:评测LLM提问获取决策信息能力
热点事件持续更新
发布Ask2Decide基准:评测LLM提问获取决策信息能力
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Yuhan Tang 等研究者发布 Ask2Decide 基准,包含 43 项规划任务,评测 LLM 智能体能否通过向人类提问获取对决策关键的缺失信息。作者说明这是持续更新的工作。 测试结果显示,在信息缺失时,四个前沿模型的初始方案在 58-98% 的任务上不可行,而信息完整时仅 5-28%;智能体找出会改变最优方案的事实的比例(39-52%)仅略高于找出的无关信息比例(32-41%),表明其提问能力有限。
AI 根据报道生成 · 1 小时前更新
最新进展11月11日 13:00
Ask2Decide 基准:评测 LLM 智能体如何向人类获取决策相关信息报道时间线
沿着报道,了解事件的不同侧面。
11月11日
- arXiv cs.AIAsk2Decide 基准:评测 LLM 智能体如何向人类获取决策相关信息
研究者推出 Ask2Decide 基准,包含 43 项规划任务,评测 LLM 智能体能否通过向人类提问获取决策关键信息。测试显示,信息缺失时四个前沿模型的初始方案在 58-98% 的任务上不可行,而信息完整时仅 5-28%;智能体找出改变最优方案的事实的比例仅略高于无关信息(39-52% 对 32-41%)。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。