Mixture-of-Control:面向 Transformer 模型的状态感知微调方法
NeurIPS 2026 论文提出 Mixture-of-Control(MoC),一种基于状态微调的高效跨层通信方法,将逐块控制状态视为稀疏 mixture-of-experts 中的专家,自适应融合局部与全局控制信号。该方法在 33 个数据集和 10 个预训练模型上评测,性能持续超越现有状态微调方法,同时保持相近的内存与计算开销。
NeurIPS 2026 论文提出 Mixture-of-Control(MoC),一种基于状态微调的高效跨层通信方法,将逐块控制状态视为稀疏 mixture-of-experts 中的专家,自适应融合局部与全局控制信号。该方法在 33 个数据集和 10 个预训练模型上评测,性能持续超越现有状态微调方法,同时保持相近的内存与计算开销。
arXiv 论文提出 GRAB,一种用于表格问答的构造器-编码器-桥接流水线:将关系数据提升为异构图,经消息传递编码后,通过少量查询条件的 latent token 传给 LLM。LLM 全程冻结以保留通用推理能力,仅训练轻量图编码器和 latent bridge(91M 参数)。该流水线显著提升关系型问答表现,在多表格等高难度场景增益最大。
研究者推出 EHRNote-ChatQA,首个基于患者多份出院小结、要求证据支撑的多轮临床问答基准,数据来自去标识化的 MIMIC-IV,含 967 个患者级多轮样本和 16,072 个由医学专家核验的 QA 对(其中 8,036 个内容问题各配一个证据 grounding 问题),覆盖 8 个临床类别,并由 12 位医学专家逐条审核。
研究者提出首个面向自主防御智能体加固商用 EDR 的评估框架,在 GOAD 实验环境中以 Horizon3 的 NodeZero 作为自主渗透测试工具、以 Microsoft Defender XDR 为主要受测对象,并扩展到 CrowdStrike Falcon 和 SentinelOne Singularity 验证跨厂商结论。
arXiv 论文(arXiv:2606.05737)发现 VLA 动作生成与文生图不同,仅将训练时间步分布偏向噪声端即可在 LIBERO、LIBERO-Plus、LIBERO-Pro 及真实机器人任务上获得强单步策略。
InfoQuant 是一种免训练的低比特量化方法,通过峰值抑制正交变换(PSOT)和自适应离群 token 选择,把激活塑造成更适合离散化的分布。在 W4A4KV4 设置下,它平均保留 97% 的浮点精度,并将 LLaMA-2 13B 的性能差距较此前 SOTA 缩小 42%。代码已开源。
研究者提出任务感知注意力神经过程模型 TA-ANP,将浮动车数据与稀疏固定检测器测量融合,统一处理全局交通状态推断的实时估计与预测三种子任务,并借助神经过程与 Monte Carlo Dropout 量化偶然与认知不确定性。
一项研究测量了医学影像中视觉语言模型(BiomedCLIP、PubMedCLIP)伪标签何时停止助益:弱标签在 ISIC 2019 上超过 20–50 个专家标签、PatchCamelyon 上约 100 个、NIH ChestX-ray14 上 250–500 个后开始有害。
一篇 arXiv 论文将生态学中的 Hamilton 法则用作利他决策机制,提出异构多团队间的机器人动态分配框架,证明该组合优化问题为 NP-hard,并用集中训练、分散执行的 GNN 策略近似求解。在消防场景中,15 台机器人、5 组成对实物试验里,学习方法全部 5 次达到灭火阈值,静态分配仅为 2 次。
作者 Litong Zhang 撤回了 DualView 多跳文档重排论文。
论文提出 CAVE,一种基于 GRPO 的结构化过程奖励方法,通过信念更新、证据获取和自适应聚焦控制三类过程信号评估中间步骤贡献,解决视觉语言模型在碎片化视觉推理中难以整合非局部视觉信息的问题。
一篇 NeurIPS 2026 论文提出 feedback world model,一种推理时闭环机制,利用机器人动作执行后观察到的真实下一状态在线修正世界模型预测,无需额外训练数据或参数更新。该机制在 LIBERO-Plus、Robomimic 及真实操作任务上将世界模型预测误差最多降低 76.4%,并能以即插即用方式改进预训练模型 Fast-WAM-Joint 的预测。
arXiv 论文在 45 个由 2,485 条实验数据、341 篇论文重构的生物学任务上测试该假设,发现 19 个 LLM 中域无关提示在 58.7% 任务轨迹和 61.9% 终点上优于域感知提示。
论文提出 Deep Reasoning,一种推理时通过结构化元推理为任务动态构建 scaffold 的方法,并实现通用智能体 DOLORES。
研究者提出连续时间分布式强化学习方法 PCBF,通过源一致、贝尔曼耦合的 flow matching 路径学习回报分布,并以共享基础噪声耦合当前与后继流,用 λ 参数化控制变量目标在偏差与方差间权衡。在可解析 MRP、OGBench 和 D4RL 上的实验显示分布拟合与训练稳定性提升,离线 RL 表现具竞争力。该工作已被 ICML 2026 接收。
arXiv 论文提出 Dooly,一种配置无关、冗余感知的 LLM 推理 profiling 工具,通过污点传播标注输入维度来源,仅对延迟数据库中缺失的算子进行 profiling,并复用 serving engine 初始化代码隔离 attention 等有状态算子。
ProMORNA 是一个零样本端到端全长 mRNA 设计生成框架,采用 BART 架构在超过 600 万自然蛋白-mRNA 对上预训练,再经冷启动监督微调与多目标强化学习两阶段后训练。
论文提出面向智能体系统的 Secret-Use Delegation Protocol(SUDP),将不可信请求者触发用户授权密钥操作、却不获得可复用权限的需求形式化为 Agent Secret Use(ASU)问题,并列出七项安全属性。
arXiv 论文提出用于乳腺癌诊断的混合量子-经典架构,采用双分支特征提取,并引入静态融合 SHF、动态融合 DHF 和温度缩放融合 TSHF 三种融合策略。
研究者首次对大语言模型在理论物理可验证解题任务上比较强化学习(RL)与监督微调(SFT),以量子场论(QFT)为主域,生成超 2,500 道合成题并整理来自 arXiv 的人工改编题。两种方法均优于基座模型,但 SFT 增益集中在同分布合成任务,RL 泛化更好,在人工改编数据集和 TPBench 上超过 SFT。团队已开源数据管线、可验证 QFT 训练数据及约 200M token 的推理轨迹。