LongSearchEval:评测大模型长程网络搜索的轨迹感知框架
热点事件持续更新
LongSearchEval:评测大模型长程网络搜索的轨迹感知框架
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
arXiv 论文提出 LongSearchEval,一个评估大语言模型长程网络搜索能力的轨迹感知智能体框架,包含统一执行协议、来源约束结果验证与失败节点定位两阶段流程。 作者团队用该框架对 8 个模型族的 16 个模型在 100 个任务上评测,共保留 1,600 次运行,自动标记 6,545 个失败节点。流程第一阶段对照智能体引用的网页验证答案组(不依赖人工编写标准答案),第二阶段审计规范化轮次并将失败节点关联到错误答案组。 据论文报告,人工验证显示答案组标签一致率达 94.50%,轮次-答案组链接的特征对应精度达 98.11%。
AI 根据报道生成 · 50 分钟前更新
最新进展10月27日 12:00
LongSearchEval:基于轨迹感知智能体框架评估大语言模型长程网络搜索能力报道时间线
沿着报道,了解事件的不同侧面。
10月27日
- arXiv cs.AILongSearchEval:基于轨迹感知智能体框架评估大语言模型长程网络搜索能力
arXiv 论文提出 LongSearchEval,一个用于评估大语言模型长程网络搜索能力的轨迹感知智能体框架,包含统一执行协议、来源约束结果验证与失败节点定位两阶段流程。团队对 8 个模型族的 16 个模型在 100 个任务上共保留 1,600 次运行,自动标记 6,545 个失败节点;人工验证显示答案组标签一致率达 94.50%,轮次-答案组链接的特征对应精度达 98.11%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。