免训练 On-Policy 蒸馏:前向传播即可融合多个专家模型
一项 arXiv 研究提出"免训练 on-policy 蒸馏":仅用前向传播,无需梯度训练,即可把多个独立微调的专家模型能力融合进一个学生模型,平均精度超过任一单独专家。
一项 arXiv 研究提出"免训练 on-policy 蒸馏":仅用前向传播,无需梯度训练,即可把多个独立微调的专家模型能力融合进一个学生模型,平均精度超过任一单独专家。
STOPD(Stochastic Truncated On-Policy Distillation)通过随机截断学生 rollout 并用分块逆概率加权(IPW)修正采样偏差,加速在线策略蒸馏(OPD)。
作者 Sangmin Lee 撤回了 ELARSpeech 论文,原因为正在处理数据使用与授权要求。该数据集原计划包含来自 Endangered Languages Archive 的 30,202 小时语音,覆盖 675 种代表性不足的语言,支持 ASR 与 TTS 扩展,并公开数据集、模型和数据构建流程。arXiv 上已无 PDF。
一项 arXiv 研究通过仅改变用户所在国家、测量 LLM 认为 60 分钟约会延误应得的补偿,考察 5 个 LLM 对 193 个国家时间价值的判断。结果显示 LLM 对欧洲用户推荐最高补偿,对非洲多为最低;以 GDP_PPP 衡量,LLM 低估了亚洲和南美用户的时间价值。研究表明地理模式已内嵌于 LLM,可能在智能体场景中造成差异化对待。
一项 arXiv 研究提出"推理收缩"概念,指 thought templates、技能库和 agent 记忆把多步推理压缩为一步,但记忆在事实改变后会静默给出错误答案。
StartLux-Decision 发布 0.8B 至 27B 参数的决策模型,分 Instant 与 AutoThink 两类:Instant 保持单次推理,AutoThink 仅对不确定决策调用显式推理。
研究者提出统一生成式检索框架 WeGR,包含 CoCo-VAE 分词器和 DHPO 偏好对齐方法,前者在量化前注入协同信号并保持码本均衡利用,后者逐步扩展奖励评估范围以缓解奖励稀疏。在电商搜索平台为期六周的线上 A/B 测试中,订单相对提升 2.539%、CTR 提升 1.508%、CVR 提升 1.381%,CPU 和 GPU 用量分别降低 25.5% 和 26.1%。
CRISP 是一种像素空间扩散解码器,包含骨干无关的 latent adapter、基于 DiT 的去噪器和支持掩码预测器,可在保持编码器与 latent 生成器不变的情况下替换 video-VAE 或 LiDAR 原生解码器,修复 LiDAR 潜在生成中的飞点问题。
arXiv 论文提出 Δ-MOPD,在多教师 on-policy 蒸馏(MOPD)中不再迁移教师的端点策略,而是迁移“教师减基座”的 logit 偏移并重新锚定在学生模型的冻结初始化上,以剔除教师从其基座模型继承的偏好。
论文提出 TAPDreamer,一种仅用公开编码器构造固定局部扰动、无需目标策略查询的攻击方法,可跨任务与动作架构迁移。仅覆盖约 6.5% 输入的冻结贴片使 FastWAM 在 40 个 LIBERO 任务上的成功率从 97.7% 降至 0.0%,在 50 个 RoboTwin 任务上从 90.86% 降至 0.0%,对 DreamWAM 和 Motus 也大幅降低成功率。
EDISCO 是首个针对欧氏组合优化问题(如 TSP 与 CVRP)的离散扩散模型,通过 E(2)-等变边评分网络与离散边变量上的连续时间马尔可夫链,实现对节点索引解的精确 E(2) 不变生成分布。
研究者提出 BridgeCast,一个基于条件 flow matching(CFM)的概率模型,用于将物理模型的海浪预报校正为再分析场。该模型采用 Transformer 架构进行时空建模,可纳入外生大气变量,并支持常微分方程和随机微分方程两种推理方式。实验表明其在不同区域和预报时效上均优于 SOTA 基线。
FERPO(Forward Entropy-Regularized Policy Optimization)是一种在策略最大熵强化学习算法,无需对 critic 求动作梯度即可实现策略改进,通过熵与 KL 散度正则的目标动作分布并用 forward-KL 结合 SNIS 拟合 actor。
研究者提出步进式风险敏感 GRPO(StepRS-GRPO),在扩散大语言模型(dLLM)的去噪状态间调整组优势变换的风险系数,且保留原有训练器。在多个 dLLM backbone 和数学推理基准上,该方法相较 centered GRPO 同时提升 pass@1 准确率与 pass@k 覆盖率,并增加答案多样性;消融实验中质量匹配对照与优势 RMS 对齐后增益依然成立。
一项研究提出基于 Transformer Autoencoder 的动作重定向方法,通过骨骼图的可学习展平构建拓扑与平移不变的潜在空间,无需配对数据即可全无监督训练。在零样本评估中,该方法将全局关节位置误差较现有基准降低 43-47%;37 人(含专家动画师)的用户研究显示其在动作对齐与物理合理性上排名最高(p < 0.05)。
论文提出训练-free 的模型组合方法 S³(Spectral Null-Space Swap):将 Non-thinking 模型保留在其主导子空间内、把 Thinking checkpoint 置于其外,从而提升推理效率。
论文提出 ROSS(Relearning from Self-Generated Rollouts through Selective Supervision),保留完整历史轨迹作为上下文,仅对选定的模型生成内容施加损失,实现从自生成 rollout 中再学习。
研究者提出 BreakingWeb,通过可控修改网站内容、服务器状态或渲染页面把已有任务变难,包含 7 个自托管网站上的 519 个任务对。六款浏览器智能体在干预下平均下降 22.9 个百分点,人类仅降 10.0 点;智能体 75% 的失败是信念失败,即在未完成所需改动时宣布任务完成。
一篇入选 NeurIPS 2026 JUDGe workshop 的论文分析 LLM 裁判奖励被压成 0/1 二值后的盲区:通过/不通过判定允许任意仿射拉伸而不改变任何判定结果。
UMM-Reflection 方法在统一多模态模型内部对完整反思轨迹施加强化学习,让反思文本与图像生成联合优化,无需推理时的外部验证器。在 BAGEL 上,该方法的 GenEval 得分比 SFT 提升 12.05 点,并在未参与训练的 WISE(+10.97)、OneIG-Bench(+3.48)和 T2I-CompBench++(+4.63)上实现迁移增益。