通过隐状态引导控制视觉语言模型的位置披露粒度以保护隐私
一项 arXiv 研究提出推理时的 route-and-steer 框架,用于视觉语言模型(VLM)在地理定位披露中的视觉语境隐私问题:模型只应以与图像视觉语境相称的粒度透露位置信息。该方法先用序数粒度路由器从生成前隐状态判断合适的披露级别,再在解码时施加隐状态干预。在四个 VLM 骨干模型上,该方法改善了披露对齐、平衡了过度与不足披露,且对通用能力基准影响较小,并能迁移到另一分布不同的数据集。
一项 arXiv 研究提出推理时的 route-and-steer 框架,用于视觉语言模型(VLM)在地理定位披露中的视觉语境隐私问题:模型只应以与图像视觉语境相称的粒度透露位置信息。该方法先用序数粒度路由器从生成前隐状态判断合适的披露级别,再在解码时施加隐状态干预。在四个 VLM 骨干模型上,该方法改善了披露对齐、平衡了过度与不足披露,且对通用能力基准影响较小,并能迁移到另一分布不同的数据集。
一项 arXiv 论文在翻译绕过威胁模型下评测 10 个主流大语言模型与 79 种语言,发现英语安全对齐不可靠迁移:在英语安全的前提下,翻译绕过率介于 21.9% 到 44.4%。风险集中在部分语言家族,且 10 个模型中有 9 个在不同条件方案下排名发生变化,说明各模型绕过率排名不稳定。论文已被 NeurIPS 2026 FLMSec 工作坊接收。
一项 arXiv 研究评测了语言模型智能体的上下文压缩对“后续问题”的影响。在 MultiRC 上,用 gpt-6-luna(通过 OpenAI Decisions API)为当前问题选句可提升该问题准确率 11.4 个百分点(仅用 25% token),但对后续问题相比随机删句无优势;LLMLingua-2 按词删减则在后续问题上高出随机删句 12.5 个百分点。
研究人员提出一个框架,将冻结的多模态基础模型泛化到视听类增量学习(CIL)中。该框架利用稠密音频与视觉表征,以音频表征作为任务稳定的上下文引导视觉表征,并结合特征级与 logit 级蒸馏缓解灾难性遗忘。在多个视听 CIL 基准上该方法持续优于 SOTA,代码已开源,论文被 WACV 2027 接收。
一项覆盖 14 种语言的大规模研究发现,一种语言的仇恨言论检测训练数据能否有效迁移到另一语言,取决于语言对组合,其中语言相似性是最强的预测因素,时间重叠和数据集规模差异影响较小。可量化因素无法完全解释迁移模式,定性分析提示共享文化线索与交际规范可能与部分剩余情况相关,但仅作为假设。研究覆盖低资源语言,为构建多语言仇恨检测系统提供了实践参考。
arXiv 论文提出 VPFlow,一种用价值预测代替精确状态预测进行规划的离线目标条件强化学习方法,其潜空间世界模型以目标达成价值为唯一监督,配合单步流策略在噪声空间用进化搜索规划。
研究者在此前提出的 Locksmith Loop 确定性验证方法基础上,提出通过 entry-replay 测试用例认证生成合成端到端测试、提升分支与段落覆盖率的新方法。
一项 arXiv 研究提出符号化偏好标注(Symbolic Preference Labeling)方法:用预训练语言模型对 prompt 与回复的预定义属性分类,再由显式规则和固定判定排序生成偏好标签,且每条标签可从存储的属性、规则和排序复算,无需重跑模型。
JetBrains Research 开发的定理证明器 Arend 的阐述性论文发布在 arXiv 上。Arend 语言基于带 cubical 语法的同伦类型论变体,更贴近 Martin-Löf 类型论(MLTT),聚焦单价基础与构造性数学的形式化,其类与记录系统支持包含式子类型、部分实现和匿名扩展。
一项被 EMNLP Findings 接收的研究分析了 8 个 6.7B–15B 参数的代码模型,基于 DELTASECOMMITS、SVEN 和 PRECISE-BUGS 三个 C 语言数据集进行线性探测。
研究者提出 ValiAssist,一种“示范即验证”系统,从教师对 AI 生成编程反馈的修改中推断可复用的验证逻辑,并支持教师在其他学生提交上检查和细化该逻辑。在 16 名教师的对比研究中,系统帮助产出的反馈与教学意图的一致率达 91%(对照 57%),修正问题标准的准确率提升一倍以上(77% 对 32%)。
一项 arXiv 研究提出迭代编辑基于来源的种子提示词的方法,以暴露目标大语言模型的幻觉。实验覆盖来自 7 个数据集、10 个主题的 500 个种子,在基线配置下,针对外在与内在幻觉的测试中分别有 77.2% 和 74.2% 的回答落入评审的强幻觉区间。
研究团队发布 AutoRedClaw,一个自动生成端到端攻击及配套环境的红队框架,针对带配置文件、长期记忆和技能的 claw 式智能体的持久化威胁。
研究团队推出多模态医疗工具调用智能体 MMedAgent-Plus,将视觉语言规划器与覆盖 12 种任务、8 种模态的 18 个专科模型结合,规划器基于来自 32 个公开医疗基准的 208,928 个样本进行指令微调。
arXiv 论文提出 Profile-DP,一种面向个性化 LLM 推理中用户资料发布的策略感知本地差分隐私框架,可证明性地约束用户未授权信息的泄露。论文给出两个有限域机制:独立扰动受保护属性的 DP-SLOT 和基于公共语义决策联合采样的 DP-BLOCK。
一项发表于 Transactions on Machine Learning Research 的研究评估了预训练语言模型能否在不依赖图文配对数据、提示词工程或对比目标的情况下,为视觉训练提供轻量辅助监督。
研究者推出 LoWAgent 基准,用于评测 Web Agent 在低资源语言上的表现,覆盖英语及印地语、孟加拉语、乌尔都语、阿姆哈拉语四种低资源语言,由 6 个完全本地化的网站在 5 种语言上生成 3,000 个任务实例。
一项 arXiv 研究揭示了多模态大语言模型在支票金额提取中的 CARLAR 影响:模型在大小写金额两个原本不同的字段返回相同数值。研究在十种视觉提示条件下评测 GPT-4.1 与 Claude 4.5 Sonnet,涵盖 243 张主支票和 598 个严格不匹配样本,GPT-4.1 在金额遮蔽下 CARLAR 率达 73.7%,CARLAR 案例的期望校准误差高达 0.93。
arXiv 论文发现,语言模型在单个提示词中组合多个任务时错误率显著上升,即使各任务单独都能可靠解决。研究指出其根源是“隐式思考预算”:组合时模型每任务使用的 token 少于单独执行,且远未耗尽上下文窗口,单独需要更长推理链的任务在组合下更脆弱,涵盖开源模型与 Claude Opus 5。按任务脆弱性分组可操纵隐式预算,在数学与语言任务上减少 43% token 用量并保持准确率。
研究者提出一种让摄像头机器人半自主完成 Shoebox Tasks 的方法:用视觉大语言模型将任务照片转换为 PDDL 表示并生成动作规划。系统在 Nao 机器人上实现了自主执行、提示下一步或以动作演示、语音和手势指出失败,无需教师编程,仅以拍摄的图像为输入,求解器可集成到多种教育机器人中。