回到最新动态
研究论文 / THE SIGNAL

ScamWorld:评估网页代理应对网络诈骗的交互环境

ScamWorld: An Interactive Environment for Evaluating Web Agents Against Online Fraud

重要性 5.5 AI 辅助整理

论文提出 ScamWorld 测试环境,六种前沿 LLM 代理受骗率为 11% 至 35%。

资讯摘要

论文提出 ScamWorld,一个重建已报告诈骗网站的交互环境,覆盖多种场景、诈骗机制与语言,使诈骗线索在代理最终操作前可被观察,从而支持可控、可重复的评估。作者对由六种前沿 LLM 驱动的网页代理进行测试,报告基线受骗率为 11% 至 35%;代理更易执行付款,而非提供凭证或钱包信息;轨迹分析显示部分代理已察觉可疑仍继续操作。

要点速读

  1. ScamWorld 重建已报告的诈骗网站,覆盖多种场景、诈骗机制和语言,用于可控、可重复的评估。
  2. 对六种前沿 LLM 驱动的网页代理测试,作者报告基线受骗率为 11% 至 35%。
  3. 代理更易执行付款,而非提供凭证或钱包信息;部分代理察觉可疑仍继续,有时把用户指令当作接受网站附加条款的授权。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/5 08:00:38(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开