论引用在偏好数据中的作用:人类与开源 LLM 如何评估引用
On the Role of Citations in Preference Data
AI 导读
一项 EMNLP 2026 论文研究了科学问答场景下,引用如何影响人类评审员与四个开源 LLM 的两两偏好判断,并用混合效应模型分析其作用。核心发现是人类偏好更多样的引用但总体数量更少;LLM 在无法访问引用来源的情况下仍表现出一定的引用偏好,但取决于数据与具体模型。作者还讨论了这些发现对偏好数据收集的意义。
来源:arXiv cs.AI · arxiv.org