DirectWAM:面向机器人控制的动作充分直接预测,实现世界-动作模型去扩散化
arXiv 论文提出 DirectWAM,通过动作充分蒸馏将级联世界-动作模型(WAM)中预训练的视频与动作专家转为单步预测器,去除扩散的随机采样迭代推理。该方法在 LIBERO 四个套件上取得 97.1% 平均成功率,在 RoboTwin 2.0 上达到 85.4%,超过同等单次评估预算下的 Flash-WAM,并扩展到三个真实世界任务。相比完整迭代教师模型,推理延迟降低 28.0 倍。
arXiv 论文提出 DirectWAM,通过动作充分蒸馏将级联世界-动作模型(WAM)中预训练的视频与动作专家转为单步预测器,去除扩散的随机采样迭代推理。该方法在 LIBERO 四个套件上取得 97.1% 平均成功率,在 RoboTwin 2.0 上达到 85.4%,超过同等单次评估预算下的 Flash-WAM,并扩展到三个真实世界任务。相比完整迭代教师模型,推理延迟降低 28.0 倍。
研究者提出 ClawMMU,一种针对有状态 LLM Agent 记忆的保护层,为每条来自网页或工具结果的记忆标注所有者、范围、来源与权限。它在内容进入模型上下文、写入存储、从存储读回或驱动工具调用时检查这些标签,核心规则是信息可以提升权限,但权限不能自行提升。由于检查只依赖内容来源而非内容本身,记忆攻击被转化为经典保护错误,即使模型被骗,harness 也能拦截。
研究者推出 BAIT(Bias Annotation In Text),用于检测新闻中的认知偏见触发因素,包含九类触发的标注规范和 50 篇由训练有素的标注者在文章与片段两级标注并裁定为金标准的英文新闻。
一篇 arXiv 论文提出,连续时间图学习应识别足以预测未来的低维状态,而非重构完整交互历史,并定义了可独立估计的内在预测维度。实验显示模型性能饱和主要由该维度决定。据此提出的轻量模型 PreDyG 仅用代表性复杂基线 0.07% 的参数即取得更优预测性能。
论文提出 MoDDiT,对 Diffusion Transformer(DiT)做简单架构改动,让 token 学习通过 MLP 和自注意力块路由,实现跨 token、图像和去噪时间步的动态算力分配。
PULSE 是一种事件驱动的个性化机会式学习框架,把设备间的每次相遇视为在线协作决策,仅在邻居梯度与本地学习方向兼容时才引入。在人类活动识别、跌倒检测和压力识别任务上,其相比机会式模型平均减少 80-94% 的同伴协作交换,同时保持或提升个性化分类性能。真机实验显示完整实现仅占 149.8 KiB RAM 和 561.8 KiB flash,peer-assisted 操作能耗有限。
一项 arXiv 研究测试八种模型在六种语言、最多 105 个道德情境上的 110 万条回答,考察不同引答与读答方式何时测得相同判断、何时测得答题习惯。结果显示 token 读法与句子读法的画像中位相关性仅 r = 0.67,而句子读法与自由句读法一致性达 0.94;去除语言共识后,48 个模型-语言组合中有 39 个在命题标签下最接近自身跨语言的画像。
一项 arXiv 研究审计了 Concept Bottleneck Models(CBM)与 Concept Embedding Models(CEM)在 CUB-200-2011 基准上的准确率来源。
一项研究提出因果、免训练的链接器,让冻结的流式 diarizer(如 Streaming Sortformer)在说话人数超过 N 个输出槽位时仍能区分说话人。
一项 arXiv 研究提出基于可解释性的框架,在 CUB-200 数据集上直接对比仅分类与描述生成两种监督训练得到的编码器表征。使用 attention rollout 与 gradient-weighted rollout 生成显著性图,并用涵盖忠实性与定位的五项指标评估。
arXiv 论文提出 On-Policy Transition Distillation(OPTD),在学生生成的 rollout 上对齐师生模型逐层 log-probability 增量,增强传统 on-policy distillation 的最终层分布匹配。
研究者提出 HuTact 框架,从大规模人手-物体交互(HOI)数据预训练触觉感知的手部表征,预训练阶段无需真实触觉信号。该框架可将人手动作中学到的交互结构迁移到机器人触觉观测,并能用少量无标签机器人交互数据继续适配。
ReCam 将历史潜变量的局部时空块分组并投影到 Diffusion Transformer 的高维隐空间中形成记忆 token,通过原生自注意力在压缩 token 数的同时保留对全部历史的块级访问;另引入双指针去噪,对近期上下文与目标帧采用分离噪声调度以抑制自回归漂移。
APRIL 是一个无需样本回放(exemplar-free)的呼吸音分类领域增量学习框架,基于冻结的 BEATs 主干,依次继承并隔离低秩专家以适配新域。其多级原型路由器检索 top-2 候选专家,并结合域路由后验与分类置信度、按匹配歧义度加权动态选择最终模型。
一项 arXiv 研究提出"极性盲"概念,指大语言模型在经历语法否定、反义词替换等极性改变的语言变换后无法识别有害意图的结构性漏洞。研究使用覆盖 10 个主流 LLM、3 种语言(英语、西班牙语、捷克语)的 260 条提示词基准和 0-5 有害性量表评估,发现大多数受测模型受此影响,最脆弱模型的平均有害性得分达 4.12,且该效应在不同否定系统间持续存在。
arXiv 论文提出 CollabSciReM,一种面向多轮科研对话的目标条件奖励框架,将会话级奖励分解为对话质量、科学严谨性和结构效率三部分,并配套基于 300 篇保留科学论文、按六个维度打分的 SciQuality 成对评测。
一项 arXiv 研究通过密集超参数网格实验,系统分析 DPO 后训练中超参数(学习率与参考策略正则化参数 β)随模型规模的变化规律。研究发现最优学习率随模型大小变化,超参数在不同训练数据集间不可迁移,且验证损失与下游 benchmark 最优超参数仅弱相关,不能作为代理指标。作者还提出用短程候选训练和中间 checkpoint 降低调参成本,并公开全部训练配置与评估结果。
研究者提出物理变量信息深度学习框架 PhyNet,用于工业流体输送系统在异构采样条件下的鲁棒故障诊断。该框架将物理变量视为全局运行约束、响应信号作为局部诊断证据,通过物理-响应交叉注意力机制实现无需严格时间对齐的交互。在三个真实空化数据集和一个公开两相流数据集共四项基准上,PhyNet 在所有评估指标中均取得最佳表现。
一项系统性实证研究分析了 LLM 在跨语言代码翻译中的幻觉现象。研究覆盖 3 个基准数据集、6 组语言对和 7 个 LLM,人工标注 13,919 个幻觉案例,构建了包含语义一致性冲突、事实知识冲突和项目上下文偏差三大类的分类体系。基于该分类提出缓解框架 HaluCodeTran,结合基于 BM25 的相关翻译示例检索与分类感知的反思式优化,为构建更可靠的 LLM 代码迁移工具提供了实测基线。
VISH 是一个无需训练、即插即用的热词预选框架,通过帧级 CTC 后验搜索直接验证候选热词的声学支持。其变体 M-VISH 在五个基准上将 Best-F1 较强学习检索基线最高提升 11.7%,并在 2,000 个候选时将候选搜索延迟降低 75.2%。Bi-MVISH 则利用反向证据增强验证的稳健性。