回到最新动态
交叉发布 / THE SIGNAL

大规模研究:Agent技能中的放宽监督指令

When Skills Tell Agents Not to Ask: A Large-Scale Study of Oversight Directives in Agent Skills

重要性 6.5 AI 辅助整理

约十七分之一的Agent技能含放宽监督指令,开源扫描器检出率有限。

资讯摘要

论文分析GitSkills中153万个英文Agent技能,按句子、条目、表格单元格和代码行切分,手工标注2097个单元并训练检测器。作者报告约十七分之一(约8.8万个)技能含放宽监督的指令,多通过权限标志实现,70.1%为无条件生效;运行shell代码、安装包或使用sudo的技能出现此类指令的几率高1.7至1.8倍。开源扫描器最多检出46%,精确率低于0.4。

要点速读

  1. 论文分析GitSkills的153万个英文技能,手工标注2097个单元并训练检测器以扩展分析。
  2. 作者报告约8.8万个技能含放宽监督指令,70.1%无条件生效,多通过权限标志实现。
  3. 运行shell代码、安装包或使用sudo的技能含此类指令的几率高1.7至1.8倍;开源扫描器最多检出46%,精确率低于0.4。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/31 08:00:18(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开