回到最新动态
研究论文 / THE SIGNAL

可审计信念更新:LLM多智能体系统的缺失安全层

Auditable Belief Updates as a Missing Safety Layer for LLM-Powered Multi-Agent Systems

重要性 5.0 AI 辅助整理

论文提出用显式信念状态与Cognitive Firewall约束多智能体信念更新。

资讯摘要

论文提出将“信念”定义为引导下游行动的、基于证据的工程抽象,并设计显式信念多智能体系统EB-MAS:把信念状态外化到结构化基底,由信念算子提出候选更新,再用Cognitive Firewall限制或拒绝证据薄弱、却受脆弱性线索强烈驱动的更新。作者还讨论群体层面的制造共识、串通与错误信息级联风险,并列出落地挑战。

要点速读

  1. 论文提出EB-MAS,将信念状态外化为结构化基底,并用信念算子生成候选更新。
  2. Cognitive Firewall用于限制或拒绝证据薄弱但受脆弱性线索强烈驱动的信念更新。
  3. 作者讨论群体信念风险(制造共识、串通、级联错误信息)及接地、误报、可扩展性与伦理滥用等集成挑战。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/31 08:00:18(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开