论文发现LLM评审会系统性奖励自信措辞而非科学内容
资讯摘要
论文提出一个受控实验框架，通过系统改写论文语言风格来研究LLM评审偏差：分别构造母语/非母语英语特征，以及高/低自信度语言特征，改写基于语言学文献的细粒度指令并由LLM执行，且设计上保持科学内容不变。作者用不同LLM评审评估改写后论文，报告称评审会系统性地奖励自信修辞，而与科学内容无关，认为这暴露了LLM同行评审的脆弱性。
要点速读
- 论文构建受控实验框架，用LLM按语言学文献衍生的细粒度指令改写论文语言风格，同时保持科学内容不变
- 干预分两类：母语/非母语英语写作特征，以及高/低自信度语言特征
- 作者报告不同LLM评审均系统性奖励自信修辞，与科学内容无关
中文摘要由 AI 根据公开来源生成，可能存在理解偏差；具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/28 08:00:17（北京时间）。 arXiv 日期为本次公告时间，论文初次投稿日期请查看原文版本记录。