回到最新动态
论文更新 / THE SIGNAL

论文研究引用在偏好数据中的作用

On the Role of Citations in Preference Data

重要性 4.5 AI 辅助整理

人类偏好引用更多样但更少,LLM也表现出引用偏好。

资讯摘要

论文研究科学问答场景下引用如何影响人类评审与四个开源LLM的成对偏好判断,采用混合效应模型分析。作者报告:人类偏好引用更多样但总体数量更少;LLM在无法访问来源的情况下也表现出与人类部分相似的引用相关偏好,但具体倾向取决于数据和模型。论文进一步讨论了这些发现对偏好数据收集的启示。

要点速读

  1. 论文用混合效应模型分析引用对人类评审和四个开源LLM成对判断的影响。
  2. 作者报告人类偏好引用更多样、但总体引用数量更少。
  3. 作者报告LLM在无法访问来源时仍表现出部分引用相关偏好,且依赖数据与具体模型。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/23 08:00:11(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开