RELIEF:基于交互体验与反馈修订的代码生成模型改进方法
arXiv 论文提出 RELIEF 方法,用编码智能体修订代码生成模型产出的界面,并将改进融入原始生成轨迹作为微调监督数据。研究团队收集了 200 个合成网站、355 段交互记录及 24 名用户的反馈,微调了两个代码生成模型的多个变体。结果显示反馈效果随基础模型能力而变,其中来自人类交互记录的批评在测试模型下带来最大的可用性提升。
arXiv 论文提出 RELIEF 方法,用编码智能体修订代码生成模型产出的界面,并将改进融入原始生成轨迹作为微调监督数据。研究团队收集了 200 个合成网站、355 段交互记录及 24 名用户的反馈,微调了两个代码生成模型的多个变体。结果显示反馈效果随基础模型能力而变,其中来自人类交互记录的批评在测试模型下带来最大的可用性提升。
arXiv 论文提出 VibeTraining-Bench,评估智能体联合优化训练数据、训练器与推理框架的跨组件协同设计能力,任务覆盖终端操作、软件工程、多轮工具使用和数学推理,并设置测试数据隔离、独立容器和网络限制三重防作弊机制。
一篇 arXiv 论文提出语义感知决策框架,将候选动作的提出、在交互上下文下的评估与最终执行结果显式分离建模。框架通过联合动作语言和解释函数定义语义结果,并由此诱导转移与奖励动态,可刻画咨询、授权等人机共享自主交互模式,且与标准 MDP 规划保持兼容。
浙大团队提出 VLA-Rolling,一个轻量推理框架,在流匹配 VLA 模型上复用被丢弃的动作尾部,包含动作尾继承、逐动作置信度估计和置信度引导的去噪预算分配三个阶段,底层模型保持冻结。
研究者提出分层分数后验恢复方法 HSPR,用历史响应因子与带不确定性的组成功率,结合后验引导的自适应任务选择,以小预算估计软件智能体在完整基准上的分数。在 SWE-bench 系列四个任务库上以 10% 任务预算评测时,HSPR 在其中三个任务库取得最低平均绝对误差(MAE),四个任务库均取得最低最大绝对误差(MaxErr),且代码与项目资源已公开。
arXiv 论文提出 HABIT-Bench,用于评估大语言模型智能体记忆系统从弱证据中推断用户习惯并应用于后续请求的能力。
研究团队提出 AM-Bench,一个基于欺诈三角框架、覆盖七个行业 35 个场景的智能体失准评测基准,沿感知威胁、感知机会和推理三个维度构建评测与检测系统。
Google 与 Meta 的开源合作项目 TorchTPU 发布论文,提出在 Google TPU 上原生执行 PyTorch 的混合 eager/编译架构。该项目支持开箱即用的模型执行与 TPU 迁移,并通过 eager 执行优化、编译集成和原生硬件加速提供有竞争力的推理与训练性能。论文共 23 页,链接 https://arxiv.org/abs/2610.24161。
推荐理由:Google 与 Meta 合作的开源项目,论文说明了 TPU 上原生执行 PyTorch 的混合架构,关注框架与硬件适配的读者可作参考。
一篇 arXiv 论文提出心理世界模型 MWM 及其实现架构 MMEA,显式构建主观世界、建模认知与心理状态的交互,并模拟受历史经验塑造的心理持续演化。
研究者提出 PraxisMemBench,一个面向持久化个人助手的基准,让个人记忆与程序性记忆在日常与工作轨迹中共同演化、相互依赖。实验显示单独维护两类记忆不足,任务完成率从 84.6% 降至 77.9%;随交互历史增长,关系类失败率从 59.8% 升至 72.9%。
arXiv 论文提出 MULTIFINGROUND 基准,用于检验多语言财报中“概念识别”与“证据抽取”之间的差距。基准基于 90 家发行方 FY2025 的英、法、希腊语披露文件构建,评测事实识别、概念识别、穷尽式事实选择与概念区分四项能力。
arXiv 论文提出 AgentStripes,一种针对 AI 智能体的证据分级成熟度模型,包含 0 到 7 stripes 等级、12 个过程域共 40 项能力、三道门(基础、安全、证明)以及 E0 到 E5 证据分级。
Thinker 团队(Ubtech)发布统一多模态世界模型 Thinker-WM,通过共享中间 Unified Dynamics Transformer 联合建模与生成 RGB、度量深度和机器人动作。
一篇 arXiv 论文提出自适应分组过程奖励框架,解决 GUI 智能体强化学习中结果奖励稀疏导致的低效学习问题。该框架将 GUI 轨迹动态划分为语义连贯的子目标组,在动作与组两个层面估计过程奖励,并将其融入 GRPO 的结果优势以提供更细粒度的训练信号。过程奖励基准与下游 RL 训练实验验证了框架的有效性。
arXiv 论文提出 MADDIE,一个由 Orchestrator 统筹、HitIdentifier、LeadOptimizer、Synthesizer 和 Evaluator 四个专职智能体组成的多智能体药物发现引擎,可灵活组合工作流、端到端完成药物发现流程。
一项研究用冻结 LLM 旁的无训练激活记忆检验“用户事实必须以文本存储”的假设:经验被存为后层状态的偏移,按会话要点的白化键索引。在 Qwen3.5-2B 与 9B 上的预注册实验显示,该记忆有选择性(约 98% 无关回复不受影响),但事实几乎不被使用(干净使用至多 15%,上下文内为 96-98%),且不减去相反参照时,存储的“不喜欢”会被召回为“喜欢”。
研究者推出 FDE-Bench,首个基于真实客户项目构建的基准,用于评估 AI 智能体在需交互式需求澄清与迭代优化的端到端交付任务上的表现。基准包含 49 个涵盖组合优化与机器学习的案例,智能体需从模拟客户处挖掘缺失需求,并由专属评估器按客户验收标准打分。
研究者推出 MultiWorldBench,一个基于 Minecraft 的多人世界模型诊断基准,包含 495 个案例配置、七大任务套件和十项能力。以 Engine GT 为参照,Gamma-World 十项能力平均分最高(21.39),Solaris(MP)为 20.88,Solaris(SP)为 10.06,而 Engine GT 达 91.69。
论文研究智能体验证器中固定检查与需judge裁决的划分能否由模型自行决定。在 EU AI Act、FINRA 指引及已部署信贷智能体等六个语料上收集约 22,000 个标注,来自三个实验室的四个模型:答案明显处几乎完全一致,监管文本上则崩溃;错误方向相反,无法选出一个保守模型;在已部署智能体自己的规则集上还共同高估固定检查的适用,恰是不触发升级的方向。
arXiv 论文提出 Penumbra,一种针对金融、医疗等场景中监管义务的样本高效对抗搜索方法,从验证锚点出发在扩展编辑预算下寻找合规与违规的相邻响应对。在同等预算下,自适应分配在 59% 的候选上达到均匀分配全覆盖,同等记录数下覆盖的失败模式是朴素枚举的 1.43 倍。