研究称LLM时间推理的算术-语义二分法不成立
热点事件持续更新
研究称LLM时间推理的算术-语义二分法不成立
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Auss Abbood 等研究者在 arXiv 发布论文(arXiv:2610.29507),检验此前将 LLM 时间推理分为时间算术与时间语义两类的共识,结论是该二分法并不成立:现有时间推理基准并未真正实现算术—语义区分。 证据有两方面。微调实验显示,模型在这些基准子集上的增益主要是数据集特定的(+6.8 到 +23.1 个百分点),同模式跨数据集迁移仅为 -3.2 到 +1.1 个百分点;基于认知需求的评估发现,驱动基准成绩的主要是知识,而非被认为分别对应算术与语义的量化和逻辑推理能力。 研究者称,这意味着现有基准主要奖励模型记住时间的常见运作方式,而非真正考察两类不同的推理能力。
AI 根据报道生成 · 2 小时前更新
最新进展10月23日 12:00
计时与理解时间:两者都无法单独解释 LLM 的时间推理报道时间线
沿着报道,了解事件的不同侧面。
10月23日
- arXiv cs.AI计时与理解时间:两者都无法单独解释 LLM 的时间推理
一项 arXiv 研究挑战了将 LLM 时间推理分为时间算术与时间语义两类的共识。微调实验显示,模型增益主要是数据集特定的(+6.8 到 +23.1 个百分点),同模式跨数据集迁移仅为 -3.2 到 +1.1 个百分点;基于认知需求的评估还发现,驱动这些基准成绩的主要是知识而非量化和逻辑推理。这表明现有时间推理基准并未真正实现算术—语义二分,而是主要奖励模型记住时间的常见运作方式。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。