通过在线策略蒸馏让安全预训练的"原生安全"跨模型迁移
一项 arXiv 研究首次提出原生安全复用问题，证明安全预训练获得的鲁棒性可通过 on-policy distillation 从小型安全预训练"教师"迁移到标准预训练"学生"，结合跨 tokenizer 对齐可跨模型家族迁移。
更新
收录归档 · 第 31 页
arXiv cs.AIAI 评分4949 arXiv cs.AIAI 评分2727 Less is More：简洁检索与 Critic 重排序的零样本组合图像检索方法入选 CIKM 2026
arXiv 论文提出 Less-is-More CIR，一个免训练的两阶段零样本组合图像检索（ZS-CIR）框架，结合简洁检索与 Critic 重排序。第一阶段只保留最具判别力的修改语义生成简洁目标描述，减少语义噪声；第二阶段从修改一致性和参考图保留度两个角度对候选图像重排序。实验验证了该框架的有效性与鲁棒性，代码已开源。
arXiv cs.AIAI 评分4646 BenchDoor 攻击研究：利用基准测试激励植入后门
arXiv 论文提出 BenchDoor 数据投毒攻击，利用模型刷基准分数的激励在训练数据中植入后门。攻击者可篡改基准的训练或测试数据构造对抗性基准，也可提供独立训练数据集。
arXiv cs.AIAI 评分3535 HealBench：评估文生图心理慰藉度的细粒度基准
HealBench 是一个用于评估文生图与图像编辑中心理慰藉度的细粒度基准，包含从 10 万候选中筛选的 30,000 对高质量图文，覆盖 19 个大类和 92 个子类，并配有 1,095 个实例的 HealBench-Eval 评测集。
arXiv cs.AIAI 评分3333 渐进子集选择与级联一致性：无监督适配视觉-语言模型新框架
一篇 arXiv 论文提出无监督预训练视觉-语言模型（PVLM）适配框架，结合基于预测边际的渐进子集选择与级联一致性学习：先用类平衡的可靠伪标签锚点起步，再用弱增强视图的时间平滑教师预测监督强增强视图的学生预测，并做置信度过滤。
arXiv cs.AIAI 评分3838 CVG-SGM：跨可见性间隙的4D场景图身份持久化方法
论文提出 CVG-SGM，一种兼容感知前端的迁移-维护-读取记忆方法，通过记录目标-载体绑定关系，在物体被不透明载体遮挡后重现时恢复其历史身份。在每载体单身份的受控设置中，CVG-SGM 重链接准确率达 1.000，而无记忆和参数量匹配的对照均为 0.570；在真实 RGB-D/SAM2 特征级序列上正确重链接 36/36 个保留检测，最强固定载体-身份对照为 28/36。
arXiv cs.AIAI 评分4545 RSD：基于特权回溯蒸馏的自进化智能体框架
arXiv 论文提出回溯自蒸馏（RSD）框架，利用特权回溯上下文将智能体自身轨迹转化为密集监督信号，同一模型兼任学生与教师，无需真值轨迹或验证器奖励即可实现自我进化。在 ALFWorld、ScienceWorld 和 SearchQA 上，Qwen3-8B 与 Qwen3-14B 性能较基模型最高提升 59.7%；结合前沿模型引导的上下文-策略进化，较固定上下文策略再提升最高 44.7%。
arXiv cs.AIAI 评分3535 正交边界遗忘（OBU）：大语言模型双用途概念的危险能力移除框架
arXiv 论文提出正交边界遗忘（OBU）框架，用于移除大语言模型中网络战利用、病原体增强等危险能力，同时避免对良性科学能力造成附带损害。OBU 通过对激活协方差做奇异值分解提取能力子空间，将参数更新限制在正交零空间，并给出 Projected LoRA 和 Closed-Form Weight Surgery 两种实现。
arXiv cs.AIAI 评分3838 超越提示词：EmbGA 嵌入空间遗传算法恢复文生图模型中的隐藏概念
一篇 arXiv 论文提出 EmbGA，一种在 token 嵌入空间中执行交叉与变异的遗传算法，用于恢复文生图模型生成图像中存在、但提示词未提及的隐藏概念。该方法把子代投影回离散 token 序列后再评分，克服了梯度方法需反向访问编码器、语言模型引导搜索每次候选需一次推理调用的局限。
arXiv cs.AIAI 评分3232 医学影像隐私保护个性化联邦学习（PPP-FL）：DCGAN 攻击与差分隐私防御
一项联邦学习研究针对大规模医学影像提出基于 DCGAN 的模型反演攻击，在 Brain MRI ND-5 数据集上能重建出语义上有意义的合成图像，暴露训练数据隐私风险。实验显示客户端差分隐私（DP）可降低攻击成功率但带来准确率权衡，而个性化联邦学习能弥补这一损失。研究还评估了不同聚合算法对攻击脆弱性与防御效果的影响，该攻防框架与模型无关。
arXiv cs.AIAI 评分5252 arXiv 论文提出基于 Prompt 进化的免训练多模态预测持续学习方法
论文提出用演化出的 900 词 guidance 文本块嵌入冻结 LLM 预测器 Prompt，实现时序预测的免训练持续学习。基于 Llama-3.3-70B 在含搜索指数、汇率、大宗商品和网络新闻的基准上，held-out 数据 GM MASE 0.776 优于 TabPFN-TS-3 的 0.898，且预测器知识截止早于所有评测窗口以防数据泄漏。
arXiv cs.AIAI 评分4545 Projected Distillation：从贴近且正确的目标学习求解难题
一篇 arXiv 论文提出 projected distillation 训练方法，将学生的失败尝试最小限度地编辑成正确目标，用于在所有尝试都失败的难题上实现近 on-policy 学习。
arXiv cs.AIAI 评分4141 超越标量排行榜：多目标 LLM 竞技场中识别 Pareto 前沿的自适应采样方法 VB-EGE
arXiv 论文提出 VB-EGE，一种固定置信度的自适应采样算法，用于在竞技场式评测中以尽可能少的成对比较识别处于 Pareto 前沿的 LLM。在多目标 Bradley-Terry 模型下，该算法能以高概率返回正确的 Pareto 前沿，并给出依赖实例的样本复杂度上界，证明其在对数因子内 minimax 最优。
arXiv cs.AIAI 评分3434 用可学习的图位置编码扩展语言模型的图推理能力
arXiv 一篇论文提出为语言推理模型（LRM）加入可扩展、置换等变的图位置编码，用 GNN 加 Graph Transformer 计算，无需序列化邻接表，将上下文负担降至 O(N)。
arXiv cs.AIAI 评分4343 MLIPS：多层索引器池共享，让稀疏注意力免去逐层全前缀扫描
arXiv 论文提出 MLIPS，一种无需训练的多层索引器池共享方法：由生产者层发布大于注意力预算 K 的 top-M 候选池，后续各层自行从中选 top-K，保留各自的打分与选择。
arXiv cs.AIAI 评分2929 The Router Already Knows：Gemma 4 26B-A4B 上利用 MoE 路由选择指导稀疏字典学习
arXiv 论文提出 NR-SAE，让稀疏字典复用 Mixture-of-experts 模型中冻结 router 已有的专家选择，在 Gemma 4 26B-A4B 第 15 层、1000 万 C4 训练 token 和三个 seed 下验证。
arXiv cs.AIAI 评分2828 AI 安全的根本不可能性结果：安全目标之间的权衡
一篇 arXiv 论文（arXiv:2610.27373）将 AI 系统与用户的交互形式化为一个三方博弈：计算或信息受限的防御者、攻击者，以及提供公开建议、受约束更少的 AI。研究证明存在一个根本性权衡：在建议必须公开的前提下，AI 难以给出既帮助防御者又不被攻击者利用的建议；论文还探讨了 AI 共享信息能否做到只惠及防御者，并讨论了这些结果对设计更安全 AI 系统的意义。
arXiv cs.AIAI 评分2828 贝叶斯网络中用于近似结果预测的路径加权影响分数
arXiv 论文提出贝叶斯网络的路径加权证据剪枝方法：枚举证据节点到结果的活跃路径并按边强度乘积打分，删除低于阈值者。理论上证明无碰撞器网络中路径分数等于端点精确相关，且剪枝后验误差有可计算上界；随机树上阈值剪枝误差比同规模随机剪枝低 1.4 至 13 倍。在七个含碰撞器和环的 bnlearn 网络上，该方法优于随机剪枝但不显著优于互信息排序，且七个中六个的打分开销超过省下的推理成本，未见加速。
arXiv cs.AIAI 评分3939 预测闭包：从集合层面刻画 JEPA 的特征选择机制
一篇 arXiv 论文提出“预测闭包”概念，从特征集合层面重新刻画 JEPA（联合嵌入预测架构）的特征选择。基于对 JEPA 训练目标的重新表述，该刻画表明特征选择取决于特征集合的属性：在特征独立演化时与已有结论一致，但预测即使像红绿灯这样不可预测的特征，只要有助于预测其他特征也可被保留。受控实验还显示，通过辅助目标或提供辅助信息可间接强化相关特征的表示。
arXiv cs.AIAI 评分4242 视觉语言模型研究揭示规模扩展的极限：子任务层面的反向缩放现象
一项 arXiv 研究系统证实视觉语言模型（VLM）在子任务层面存在反向缩放：同一模型家族中更大模型在特定问题类别上表现不如小模型。研究评估 4 个模型家族的 19 个模型、8 个多模态基准，共完成 558,334 次模型-问题评估，识别出 375 个反向缩放的子任务-模型对组合、4,342 个大模型答错而小模型答对的独特查询。