回到最新动态
交叉发布 / THE SIGNAL

推理让语言模型更一致吗?

Does Reasoning Make Language Models Agree?

重要性 5.5 AI 辅助整理

开启推理提高模型一致性,推理链更长则预示分歧。

资讯摘要

论文区分“推理作为干预”与“推理作为可观察行为”,在两家开发者的九个模型和三个分类任务上比较模型间一致性。结果显示,开启推理会提高模型对同一个体的预测一致性;但推理链更长的个体反而获得更不一致的跨模型预测。作者报告,两种模式在控制准确率差异后仍然存在。

要点速读

  1. 论文在九个模型、三个分类任务上比较推理努力受控变化与观察到的推理长度对模型一致性的影响。
  2. 开启推理提高模型对同一个体的预测一致性,推理链更长的个体跨模型预测更不一致。
  3. 作者报告两种模式在考虑准确率差异后仍存在。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/3 08:00:27(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开