回到最新动态
研究论文 / THE SIGNAL

MOSAIC:面向对话智能体的全模态长期记忆基准

MOSAIC: An Omni-Modal Benchmark for Long-Term Memory and Cross-Modal Reasoning in Conversational Agents

重要性 5.5 AI 辅助整理

新基准 MOSAIC 将全模态记忆评测拆解为写入、检索、交付与阅读四类失败。

资讯摘要

论文提出 MOSAIC,一个面向全模态对话智能体的长期记忆与跨模态推理基准,包含 923 个问题,覆盖 11–24 轮、以人物设定为基础的历史会话,涉及文本、图像、视频和音频。该基准构造空间、时间与韵律等有针对性信号,并配套诊断协议:固定问题、阅读器、提示与预算,分别干预表示、检索与交付环节。作者报告,表示损失因模态而异,即使给定金标准证据,阅读环节的残余损失仍占主导,拒答能力也偏弱。

要点速读

  1. MOSAIC 含 923 个问题,历史会话跨 11–24 轮,覆盖文本、图像、视频、音频四种模态。
  2. 基准构造空间、时间、韵律信号而非装饰性媒体,并对空间信息做因果验证、对标注韵律做选择器级验证。
  3. 匹配分解显示表示损失与模态相关,金标准证据下阅读环节仍占主导,拒答在对照条件下表现较弱。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/23 08:00:11(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开