回到最新动态
交叉发布 / THE SIGNAL

失败编码智能体该把下一批 token 花在哪:推理期资源的因果归因

Where Should a Stuck Agent Spend Its Next Tokens? Causal Attribution of Inference-Time Resources

重要性 5.5 AI 辅助整理

智能体偏好的资源与其实际修复收益存在错位。

资讯摘要

论文提出 Banzhaf Resource Attribution(BRA)受控析因框架,在固定失败状态与修订协议的前提下,测量计算、信息、反馈三类资源对修复的边际贡献及交互作用。作者在 MBPP+ 与 HumanEval+ 的 194 个函数级失败、SWE-bench Verified 的 126 个仓库级失败上评估六个模型,发现任务相关规格稳定提升修复,公开测试反馈收益小,检索代码几乎无益;额外计算的价值随模型能力下降,信息仍有用。但四个前沿模型中三个在 95–100% 情况下选择反馈,收益低于均匀随机选择。

要点速读

  1. BRA 框架在固定失败状态和修订协议下,量化计算、信息、反馈三类推理期资源的边际贡献与交互。
  2. 任务相关规格稳定改善修复,公开测试反馈收益小,检索代码几乎无益;额外计算价值随模型能力下降。
  3. 四个前沿模型中三个在 95–100% 情况下选择反馈,其收益低于均匀随机资源选择。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/23 08:00:11(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开