回到最新动态
交叉发布 / THE SIGNAL

无签名情况下识别AI编码代理提交

Agent or Human? Detecting Commits by AI Coding Agents in the Absence of Authorship Signatures

重要性 5.5 AI 辅助整理

无签名检测可辅助筛选待审提交,但无法替代记录归属

资讯摘要

论文研究在去除作者签名后能否区分AI编码代理与人类的提交。作者使用1226个仓库的783万条提交,覆盖五种编码代理。掩蔽签名后,检测器区分代理与人类提交的ROC AUC最高达0.859,信号主要来自提交信息冗长度和改动规模而非代码本身;但在实际代理占比下,全测试集最佳精确率仅0.332,跨代理迁移效果差。

要点速读

  1. 研究使用1226个仓库的7,837,946条提交,覆盖五种编码代理与人类提交
  2. 掩蔽签名后检测器ROC AUC最高0.859,信号主要来自提交信息冗长度和改动规模
  3. 实际代理占比下最佳检测器精确率仅0.332,迁移到Claude Code时TF-IDF的AUC仅0.524

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/29 08:00:21(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开