跳到正文
arXiv cs.AI· Yu Hou, Hal Daum\'e III, Rachel Rudinger, William Walden·· 2 小时前AI 评分36

论引用在偏好数据中的作用:人类与开源 LLM 如何评估引用

On the Role of Citations in Preference Data

AI 导读

一项 EMNLP 2026 论文研究了科学问答场景下,引用如何影响人类评审员与四个开源 LLM 的两两偏好判断,并用混合效应模型分析其作用。核心发现是人类偏好更多样的引用但总体数量更少;LLM 在无法访问引用来源的情况下仍表现出一定的引用偏好,但取决于数据与具体模型。作者还讨论了这些发现对偏好数据收集的意义。

来源:arXiv cs.AI · arxiv.org