事实回忆中的“指令税”:基座模型可胜过其指令微调版本
该论文介绍 AKBC LM-KBC 2026 共享任务的解决方案,在官方榜单取得 0.6836 分,超过 0.2964 基线一倍以上。在不使用检索和微调、参数上限 32B 的条件下,基座模型用文本补全提示得 0.6836,而指令微调版本经聊天界面仅得 0.5681,作者称之为“指令税”。方案用训练集示例提示基座模型,生成 64–256 个输出并保留重复项,再针对不同关系做两项专门处理。
该论文介绍 AKBC LM-KBC 2026 共享任务的解决方案,在官方榜单取得 0.6836 分,超过 0.2964 基线一倍以上。在不使用检索和微调、参数上限 32B 的条件下,基座模型用文本补全提示得 0.6836,而指令微调版本经聊天界面仅得 0.5681,作者称之为“指令税”。方案用训练集示例提示基座模型,生成 64–256 个输出并保留重复项,再针对不同关系做两项专门处理。
MAS-Guard 是一个面向单智能体和多智能体 LLM 应用的统一安全防护框架,包含智能体本地 Agent Guardrail(A-Guard)层与开发者掌控的 Agent Charters 和 Control Plane 系统层,可通过允许、反思、确认和阻断四种干预手段执行防护。
VisualEvolve 是一个让视觉语言模型(VLM)通过 Select--Execute--Evolve--Evaluate 循环自进化视觉操作与工具使用技能的框架,无需更新模型参数。
一项 arXiv 研究将四种动态专家跳过方法统一分类,并与静态减少每层专家数 k 的简单基线在 Gemma4-26B-A4B、Qwen3-30B-A3B 及多模态模型 Qwen3-VL 上按同等专家计算预算对比。
研究者推出 nokast-secureRAG,一个约 0.5B 参数的小语言模型,作为 RAG 检索与生成之间的语义防火墙,联合评估用户查询与检索内容,分类为安全、可疑或恶意。
研究者发布 CountVideoBench,包含 2,600 个合成视频,覆盖 [5, 50] 区间内 26 个计数,用于诊断视频语言模型的物体计数偏差。在零样本设置下评测来自 9 个架构族的 16 个视频语言模型,最高 Exact Match 仅 27.6%。各模型准确率随计数呈单调下降或“峰值-崩塌”模式,且预测集中于各自偏好的整数,说明计数失败并非主要由难度随数量增加导致。
arXiv 论文提出 RayCo4D,一种用于单目 4D 动态重建的光线条件连续运动模型,将视觉测量与潜在 3D 运动状态显式分离,通过带 SE(3) 位姿的共享潜在运动节点与白噪声加速度过程先验实现连续时间插值。
研究者提出门控知识引导原型迁移方法 GProtoT,作为免训练求解器 SS-Text+ 的前置斥力模块,利用 VLM 相似度与基于本体的临床距离,将已支持类别的视觉残差迁移到无标注支持样本的低流行类别。
一项基于 16,575 条英文推文的研究提出用“stability delta”指标衡量 emoji 的语境聚类程度,发现主题上下文越聚集的 emoji,其众包情感反而越两极分化。
ICML 2026 论文提出 MuDo-CoM(Multi-Domain Covariance Matching)算法,研究多域线性混合模型下相关潜在成分的可识别性问题。该方法是 ICA 的推广,假设各域仅通过域特定的成分缩放不同,在域变化充分时仅凭二阶统计量即可识别潜变量与混合函数。算法在模拟数据和真实 fMRI 数据集上完成验证。
研究者提出 ABACUS,一个针对指令式图像编辑模型数值编辑能力的基准,用于评估模型在保持场景不变的前提下增、删或改变指定数量对象的能力。该协议无需 VLM 打分,基于 panoptic 真值和检测器共识在实例级验证编辑结果。对主流图像编辑模型的评测显示,数值编辑失败随场景复杂度和对象数量增加而显著加剧。
一篇 arXiv 论文将 LLM 智能体团队协作形式化为块优化:每个智能体在局部目标加校正项引导下改进共享解的一部分,协调者按全局目标检验并合并提案,并证明线性收敛至误差下限。
研究者提出 GALA,一个具备显式点云感知的几何感知语言模型,用于可控物体摆放,通过自回归方式结合场景上下文和摆放指令逐个预测目标物体的 6D 位姿。模型采用两阶段训练:先以预训练任务对齐几何与文本模态,再针对摆放任务微调。
arXiv 论文提出 VGL-stGen,一个从预训练医学视觉-语言模型适配而来的多模态大语言模型,使用配对的肺 H&E 病理图像与空间转录组学数据及单细胞参考进行训练。单一部署检查点支持 13 项评测任务,涵盖组织与细胞类型分类、基因预测及基于病理、细胞身份和观测表达的条件表达补全。实验表明正确配对的病理图像能提供超越观测表达之外的信息。
研究者提出 PI-MLLM,一种心理物理学启发的多模态大语言模型,用于 Oddly Satisfying(解压向)视频情感分析(OSVEA),并构建了含 12,000 条标注 5 秒片段的 OSVD 数据集。
论文提出 TPO,一个三层分布鲁棒框架,用于 OOD 偏好对齐,联合建模组级、提示级和偏好级三层分布偏移的不确定性。该方法用 Wasserstein 距离实例化,得到包含闭式偏好级 margin 惩罚、提示级对抗嵌入扰动和最坏情况组重加权的可解目标,各层由独立半径控制。论文给出了有限样本收敛保证,并实证验证 TPO 优于现有鲁棒 DPO 方法,已被 NeurIPS 2026 接收。
一篇 arXiv 论文从数据系统视角分析长上下文 LLM 在单机 GPU 上本地推理的瓶颈。研究发现 self-attention 主导长上下文推理的运行时间,且其现有结构使关键 GPU 资源利用不足,最新一代 GPU 反而常常表现最差。作者将 KV cache 分页、缓存利用率和 GPU 同步等问题归结为数据管理问题,并以实验观察和建议的形式供数据系统社区参考。
该研究提出面向南非食品包装照片 R3337 草案标准的区域引导证据提取与弃权式筛查流程,先用三类检测器定位营养成分表、配料表和产品标识区域,再以 PaddleOCR 和结构化提取恢复证据并按确定性规则判定,证据不全时弃权。
研究者发布 JAXbounce,一个用于评估主动推理的连续控制类 Pong 基准,结合连续状态、随机动力学与可组合的观测模型,基于 JAX 完全可微且可并行。论文在三种难度场景和八种噪声条件下运行超过 10,000 次智能体仿真,比较确定性基线、基于 Unscented Kalman Filter 感知与期望自由能规划的智能体,以及使用预训练神经网络编码器的像素智能体,并已开源为可复现基准。
一项研究比较了预训练推理、全量微调与 LoRA 在四个电力负荷聚合层级上的预测精度与适配效率,以 MOIRAI 1.0 Large 为主干,并用 Chronos-2 验证结论可迁移。