研究发现在生成式搜索中委派任务给多个LLM并不提升准确率
热点事件持续更新
研究发现在生成式搜索中委派任务给多个LLM并不提升准确率
1 篇报道1 个报道来源53 分钟前更新
先了解这件事
AI 综述
Tamara Stojanovska、Elisabeth Kirsten 等在 arXiv 论文《Lost in Delegation》中比较了 LLM 智能体系统的多种任务委派模式,发现委派并不比不委派带来一致的准确率提升,效果因模型和任务而异。 研究使用带 pre- 与 post-cutoff 划分的专门数据集。结果显示,当任务涉及编排 LLM 自身知识之外的信息时,委派可能显著降低准确率,而让同一 LLM 直接使用工具效果更好。论文归纳出委派查询失真、工具使用低效、智能体间信息保存与传递失败等反复出现的失败模式。
AI 根据报道生成 · 28 分钟前更新
最新进展11月14日 13:00
Lost in Delegation:生成式搜索中任务委派有效性的研究报道时间线
沿着报道,了解事件的不同侧面。
11月14日
- arXiv cs.AILost in Delegation:生成式搜索中任务委派有效性的研究
arXiv 论文《Lost in Delegation》用含 pre- 与 post-cutoff 划分的数据集比较 LLM 智能体系统的多种委派模式,发现委派并不比不委派带来一致的准确率提升。当任务涉及编排 LLM 自身知识之外的信息时,委派可能显著降低准确率,而同一 LLM 直接使用工具效果更好。研究归纳出委派查询失真、工具使用低效、智能体间信息保存与传递失败等反复出现的失败模式。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。