LLM 概率更新研究:传闻式表述与提问方式如何影响证据敏感度
一项 arXiv 研究测量了 LLM 在收到单条新信息后的概率更新幅度,使用 δ-SNLI 的前提-假设配对,测试 Qwen3-8B、OLMo-2-7B 两个本地模型及五种 agent 命令行配置(240 对与 120 对)。
一项 arXiv 研究测量了 LLM 在收到单条新信息后的概率更新幅度,使用 δ-SNLI 的前提-假设配对,测试 Qwen3-8B、OLMo-2-7B 两个本地模型及五种 agent 命令行配置(240 对与 120 对)。
研究者提出一种 anytime-valid 运行时监控器,用观测到的闭环轨迹审计学习型障碍证书,检测其在部署时因动力学偏离训练分布而失去统计支持。该方法将条件障碍漂移表述为逐回合序贯假设检验,把障碍增量转化为非负检验上鞅,在任意停止时间下实现有限样本误报控制,并通过监控边界的确定性时间整形在前段部署期内更保守。实验评估了有效与无效证书下的经验报警行为,代码和数据已公开。
研究者提出 World2HOSI,一个多专家编排框架,可从 3D Gaussian Splatting(3DGS)场景和自然语言指令生成长时程人-物-场景交互(HOSI)数据。
RLSplat 是一种资源线性的预算可控前馈 3D Gaussian Splatting(FF3DGS)框架,使表示大小、推理延迟和峰值内存随 Gaussian 预算减少而线性下降。
一项 arXiv 研究将 LLM 置信度分为解题前的 FOK 与解题后的 JOL 两类信号,在两个前沿大语言模型、多推理领域、翻译版马拉地语基准及新构建的本地马拉地语事实问答基准上评估其可靠性。结果显示,成本更低的解题前信号校准较弱,解题后置信度认知对齐更强但推理成本更高;英语与马拉地语间校准趋势经翻译可较好迁移,但在本地化知识上明显退化,且模型幻觉答案在生成后仍保持持续偏高的置信度。
arXiv 论文提出 VLA-Retain 基准,在 LIBERO-Plus 数据集七个扰动维度上比较五个开源 VLA 模型经 Camera-view 或 Sensor-noise 数据微调后与自身基础检查点的表现。
CovNav 是一个免训练框架,用 Conformal Prediction(CP)将混合推理 LLM 的快慢双模式转化为不确定性感知的决策,仅在模糊查询时升级到慢速思维链推理。在 Gibson 和 HM3D 上,成功率比最强零样本基线分别高出 0.8 和 1.7 个百分点,且只对 12.4% 的查询调用慢推理。TurtleBot 4 真机实验进一步验证了该方法。
一项 arXiv 研究提出成对比较框架,将回归问题重构为聚合的相对排序任务,提升小样本场景下的数据效率。在 UTKFace 数据集(23k 图像)上,成对学习生成超过十亿个训练比较,使从零训练的轻量 ResNet10 达到 3.64 年 MAE,超越含大规模预训练的模型。分类任务中,该方法在 STL10 的 500-2000 标注样本上比同配置 10-way 交叉熵模型准确率最高提升 5.2%。
研究者提出针对大语言模型统计水印的统一攻击框架,发现 KGW、GumbelSoft、DipMark、ITS、SynthID 等方法的检测分数与生成时引入的 token 概率偏移存在 score-ratio alignment 关联。攻击者仅需黑盒查询即可生成逃逸检测且保持流畅的文本,在 7 种水印方案、3 个 LLM 的评测中将检测率降至最高 0.05,并证明该弱点是设计上的固有缺陷。
推荐理由:论文指出统计类大语言模型水印的检测分数与 token 概率偏移存在固有关联,并给出黑盒攻击可将检测率降至 0.05 以内。
Wonsup Shin 与 Jingu Kim 在 arXiv 发表论文,消融一条将会议语音转为问答对的语料生产管线。四个语料来自同样 40 场韩语医疗与金融会议,语料质量随处理阶段开启上升,四名 LLM 评审与六名人类专家排名一致,全精炼语料在 1-5 分制上分别领先 +0.18 和 +0.22。
论文提出 Bayes-Consistent Tempering(BCT),解决后验诱导流语言模型中温度缩放作为后处理带来的分布与动力学不匹配问题。BCT 将温度显式纳入生成流的分布和动力学,并在超球流语言模型与 von Mises–Fisher 流语言模型上广泛温度范围内提升 GSM8K 生成表现,增益也延伸至 Sudoku。
论文提出用单个头戴相机(122 美元)配合无电子元件手套(22 美元)和工作区纸码,替代腕部相机、位姿追踪器及多数据流同步,得到 6.5 毫米与 1.6 度中位精度的 6-DoF 标签。
一篇 arXiv 论文提出组合式授权失败(CAF)概念,并证明关系性目的违规构成 2-safety 超属性,逐动作监控器在不误报的前提下无法检测任何此类违规,且与底层模型无关。作者用 SAT/SMT 合成器 AL-SYNTH 生成最小反例,在九个 LLM 评审中逐动作视角几乎全部放行,但看到两次执行后会标记;所调查的六个 guardrails 均未实现跨执行监控。
研究者提出一种复杂数据描述子与图神经网络,用于学习有机-无机化合物间的异质图间交互。该方法应用于混合太阳能电池材料物理性质预测,在 1,682 种材料的带隙预测上取得 SOTA 准确率。
ABench 是一个面向中文价值观分类的对抗性基准,基于 158 个细分价值子类构建,包含 2,895 个开放式问题,并采用角色扮演、逻辑陷阱等手段探测模型立场稳定性,同时提出基于题目特定评分标准的加权自动评估框架。对 16 个主流 LLM 的实验显示,多数模型在复杂价值观对抗攻击下得分低于 60,暴露明显脆弱性。该数据将公开发布,已被 EMNLP 2026 主会接收。
一项 arXiv 研究对 114 篇递归自我改进(RSI)相关研究做全文编码,其中 90 篇自称 RSI 系统。结果显示,60% 的 RSI 研究在未用于选择的任务上做评估,仅 22% 审计两次及以上完整循环的重跑;在 26 篇声称改进流程更好的研究中,只有 4 篇在相同起始产物和匹配预算下比较前后流程。研究支持将每项声明与所需评估设计关联的报告标准。
arXiv 论文提出 WORTH Benchmark,让模型阅读无线索标注的原创推理小说,自主选择关键线索句、识别案件参与者并解释推理过程。试点实验在两个 episode 上共进行 70 次正式运行,其中 67 次可内容评分;Episode 02 的 37 次可评分运行中有 31 次选了相同的错误参与者,相邻的怀疑向与洗脱向句子分别被选 25 次和 0 次。
arXiv 论文提出一种将验证损失分解为近似、估计与记忆三项的方法,并在熵率闭式已知的受控数据源上分析随机 token 替换这一数据增强手段。结果显示,替换把预测向语料均值收缩,在有助之处可减少损失过最小点后约 60% 的上升;在韩文和日文网页文本上约消除三分之一。在十个真实语料中,替换降低其中九个的最终损失,仅在最冗余的程序生成 JSON 人口普查语料上有害。
一项 arXiv 研究提出"事实访问状态"概念,发现掩码扩散语言模型(DLM)在第一层注意力就把关系措辞路由到可见实体位置,事实查找比自回归(AR)模型更早完成,且状态随关系表述和查询方向变化而占据一片区域而非单点。
研究者提出 TRCM(Topology-Aware Route-Consistency Modeling),通过复用自回归构造流程的节点表示来预测两两客户同路径概率,并以拓扑熵加权和结构保持增强作为路径一致性信号指导节点选择。