回到最新动态
研究论文 / THE SIGNAL

LLM提案实验中的预注册修补分类

Patching the Protocol: A Taxonomy of Pre-Registration Repairs in LLM-Proposer Experiments

重要性 4.5 AI 辅助整理

论文提出预注册协议修补的两轴分类法与九项检查清单

资讯摘要

论文针对涉及LLM生成内容的预注册实验,提出预注册协议在软件实现中常需修补的问题。作者报告三个案例(生产调度、激励设计、任务分配),每个协议各发生一次缺陷修补,共三次;均未改动编号判断标准、阈值或评分规则,也未改动已收集数据,其中两次在收集数据前修改了预注册设计参数并记录理由。论文提出按缺陷类别与时机划分的两轴分类法,并给出九项检查清单。

要点速读

  1. 三个案例各需一次缺陷修补,共三次,均未改动判断标准、阈值、评分规则或已收集数据
  2. 两次修补发生在数据收集前,修改了预注册设计参数并记录理由
  3. 论文提出缺陷类别(环境/可行性/正确性)与时机(数据前/数据后)的两轴分类法及九项检查清单

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/5 08:00:38(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开