回到最新动态
研究论文 / THE SIGNAL

研究:计算机使用代理点击失效风险主要来自页面加载

What Does "Now" Mean to Your Computer-Use Agent? Stale Screenshots, Page Loads, and Which Check to Run Before a Click

重要性 5.5 AI 辅助整理

点击失效风险主要源于页面加载,而非规划间隔。

资讯摘要

论文测量了31个公开网页上的计划点击,发现点击失效风险主要来自页面加载而非规划间隔:页面完全加载后计划的点击在30秒内仅0.4%失效,而页面打开后第一秒内计划的点击有17%失效。等待约1秒让网络活动停止可消除大部分风险,但十款常用开源代理中有八款的等待规则仍使超过1%的点击失效。作者还发布基准生成器、检查收益的盈亏平衡公式及三条开发者规则。

要点速读

  1. 在31个公开网页上,完全加载后计划的点击30秒内0.4%失效,页面打开首秒内计划的点击17%失效。
  2. 等待约1秒至网络活动停止可消除大部分风险,但十款常用开源代理中八款的等待规则仍使超过1%的点击失效。
  3. 点击前检查场景下,像素比较验证目标位置的准确率与前沿海视觉语言模型相当,延迟为其八分之一;4B模型在验证上一动作是否成功上与前沿海模型相当。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/31 08:00:18(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开