论文提出 ScamWorld 测试环境,六种前沿 LLM 代理受骗率为 11% 至 35%。
资讯摘要
论文提出 ScamWorld,一个重建已报告诈骗网站的交互环境,覆盖多种场景、诈骗机制与语言,使诈骗线索在代理最终操作前可被观察,从而支持可控、可重复的评估。作者对由六种前沿 LLM 驱动的网页代理进行测试,报告基线受骗率为 11% 至 35%;代理更易执行付款,而非提供凭证或钱包信息;轨迹分析显示部分代理已察觉可疑仍继续操作。
要点速读
- ScamWorld 重建已报告的诈骗网站,覆盖多种场景、诈骗机制和语言,用于可控、可重复的评估。
- 对六种前沿 LLM 驱动的网页代理测试,作者报告基线受骗率为 11% 至 35%。
- 代理更易执行付款,而非提供凭证或钱包信息;部分代理察觉可疑仍继续,有时把用户指令当作接受网站附加条款的授权。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/5 08:00:38(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。