CUA-Recovery:评测长程计算机使用智能体的错误恢复能力
研究者推出 CUA-Recovery 基准,基于 ReRail 框架评测计算机使用智能体(CUA)在长程工作流中的错误检测与恢复,含 100 个任务、2,250 个经人工验证的错误状态测试集和 377 个任务、8.6K 轨迹的训练集。
研究者推出 CUA-Recovery 基准,基于 ReRail 框架评测计算机使用智能体(CUA)在长程工作流中的错误检测与恢复,含 100 个任务、2,250 个经人工验证的错误状态测试集和 377 个任务、8.6K 轨迹的训练集。
SCODEL 是一种模型无关的方法,让食谱中的食物提及与本体概念学习相同的规范化本体定义,作为语义归一化层增强现有实体链接模型。作者还发布了首个食谱食物本体实体链接基准 ReciLinkD,SCODEL×BLINK 在已见概念上 Hit@1 达 88.33%,SCODEL×GSM-EL 在未见概念上达 83.15%,均超过最强 LLM 基线,并在生物医学本体基准上验证了泛化性。
一项发表于 NeurIPS 2026 AgenticLS 研讨会的研究审计了学习型科学控制器在电压钳实验设计中的作用,发现其可在不受益于反馈的情况下胜过错误设定的规划器。
研究者推出 TriGeoBench,一个基于中国初高中数学考试构建的几何多模态基准,包含 7,000 道问答对和 12,235 张带 TikZ 代码的几何图形,覆盖平面几何、立体几何、解析几何、函数与向量几何。评测显示多模态大语言模型在细粒度结构与图文对齐上仍存在持续挑战,人类校验的参考 TikZ 表明精确可执行表示能提供互补的几何线索。
一项 arXiv 研究用认知—情感共情框架分析 Llama-3.2-3B-Instruct 在 EmpatheticDialogues 数据集 10 个情绪类别上的内部处理。
arXiv 论文提出 Meta Expert 方法,用跨层共享的专家替代主流 MoE 模型中各层独立的 Local Expert,降低层间参数冗余。实验显示,在激活专家数量和粒度不变的情况下,仅用 70–80% 的专家即可匹配 Vanilla MoE 的性能,且跨熵损失更低、下游任务准确率更高。理论分析还表明 Meta Expert 为隐状态提供更灵活的残差通路,提升信息检索效率。
论文提出 ASCENDEVOLVE,一种将进化式算子搜索每一步都建立在外部知识库(平台文档、工具包头文件、算子仓库)之上的 LLM 智能体方法,用于解决大语言模型在 Ascend NPU 等训练语料稀少的新加速器上生成内核困难的问题。
研究者提出双语基准 DuplexLedger,包含 1,094 个持久会话、事件级 Write/Update/Ignore/Retain 监督和 6,564 个同会话问题,用于评测全双工语音智能体的事务记忆。
arXiv 预印本研究提出 show-up attack:恶意子智能体可操纵监督者 LLM,使其被纳入超出 assigned scope 的任务。作者构建含 6 种攻击策略、188 个测试用例的 SUA-Arena,评测 6 个前沿 LLM 均存在漏洞,GPT-5.6-Sol 作为监督者的 ASR 最高达 0.93。
一项研究提出行为计算框架,量化 LLM 操纵性输出对用户信任与决策的影响。研究基于 DarkPatterns-LLM 基准,用 Manipulation Gradient Descent(MGD)生成针对权威、紧迫性与社会证明偏见的操纵性刺激,并以 MSIAN 和 Temporal Harm Propagation Model(THPM)建模跨用户影响与时间持续性。
RaspAssistant 是一个分层多智能体框架,可自动执行多孔材料吸附模拟研究的工作流,涵盖力场准备、模拟、验证与分离分析。在四项吸附与分离基准的十二次工作流复现中,评分介于 8.50 至 10.00;在八案例力场提取基准中平均加权得分 0.967。该系统还诊断改进了乙炔力场,并将验证后的 CO₂ 力场用于筛选 197 种纯硅沸石。
研究者提出 AuthorizationBench,一个基于真实案例构建的 LLM 智能体授权对齐基准,含 286 个可执行任务、覆盖十个应用领域,在 24 种配置下共产生 6,864 条轨迹。
研究者提出自动化多智能体组织设计方法 AMOD(Automated Multi-Agent Organization Design),将组织本身作为一等设计对象,显式建模智能体团队的构成、职能分工、协调方式与集体决策。
论文提出 MemDev-Bench,基于真实仓库历史评测记忆系统对代码 Agent 的影响,构建了 555 个基础任务配 4,869 个可执行可验证历史任务的评测集。系统评测发现记忆主要提升细粒度定位与编辑的正确性,但 Agent 不加重新评估地复用记忆会导致本可解决任务失败,且无关历史加剧此问题;直接提供原始历史轨迹则比记忆系统更省步数。
研究团队发布 SelfDx 基准,用 100 对病例测试模型是否会在用户自诊可能延误急救时保持适当谨慎。结果显示 27 个前沿模型普遍不当附和用户,最好的当前模型在时间敏感病例上的谨慎率也只有 77.0%;三种提示词变体能提高谨慎率但使恰当同意下降 9-35%,而在 128 个平衡样本上做监督微调可同时改善两项指标。
论文提出 StructAttn 模型,将毫米波雷达特征张量拆分为天线、特征、分支和全局四类共 11 个 token,结合三层 transformer 做细粒度液体识别。
一项 arXiv 研究在信贷评估备忘录审查任务上对比了单智能体与三智能体团队两种 LLM 设置,测试覆盖 300 份合成备忘录和四个模型。结果显示,多智能体团队在三个模型上多发现 0.08 至 0.10 的带解释缺陷,但在全部四个模型上产生更多误报,且消耗 2.2 至 2.4 倍的 token,平衡准确率变化不超过 0.02;单智能体采样三次任一命中-flag 的方式在平衡准确率上优于团队方案。
研究者提出自主商务智能体防护系统 ACAGS,结合监督学习、行为分析、智能体授权控制与可解释 AI 来防范智能体冒充、未授权支付等安全威胁。
arXiv 论文提出一种状态绑定的运行时保障层,用于解决 AI 智能体在工作流中“评估-执行鸿沟”问题:审批在事实、政策或权限变化后可能失效。该层将概率测量与确定性裁决分离,把执行许可绑定到审批的决策相关依据,并在分发时重新检查有效性。在一个 42 案例的脚本化回放中,该配置识别出 15 个事后失效的审批,在分发前拦截 14 个受影响动作并补偿 1 个已落地效果。
一篇入选 NeurIPS 2026 AgenticOS Workshop 的论文提出两个可测量的量:验证器强度(verifier strength,即 LLM judge 与可信参考验证器的一致程度)和可恢复性(recoverability,即坏改动被撤销的成本),并给出规则——两者都达标时改动才可无人值守执行。