个体对齐不保证群体对齐,但攻击前行为可预测群体响应。
资讯摘要
论文研究LLM智能体群体在安全分诊任务中的集体行为:引入坚持单一决策的少数智能体后,孤立评估中判断几乎相同的告警会产生明显不同的集体结果,说明个体审计无法可靠预测群体行为。作者仅用无对抗的良性行为校准响应函数,可在攻击发生前预测群体偏移强度,并在24与48个智能体的群体中验证。允许智能体观察彼此推理可削弱对抗影响,但不能可靠阻止捕获;移除或替换对抗者后,群体平均行为会回归原水平。
要点速读
- 论文在安全分诊任务中让LLM监控智能体群体决定是否升级告警,并加入坚持单一决策的少数智能体测量群体行为偏移。
- 作者用无对抗的良性行为校准响应函数,在攻击前预测群体偏移强度,并在24和48个智能体的群体中验证。
- 观察彼此推理可削弱对抗影响但不能可靠阻止捕获;移除对抗者后群体行为回归原水平,与单稳定态模型一致。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/4 08:00:28(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。