新基准 MOSAIC 将全模态记忆评测拆解为写入、检索、交付与阅读四类失败。
资讯摘要
论文提出 MOSAIC,一个面向全模态对话智能体的长期记忆与跨模态推理基准,包含 923 个问题,覆盖 11–24 轮、以人物设定为基础的历史会话,涉及文本、图像、视频和音频。该基准构造空间、时间与韵律等有针对性信号,并配套诊断协议:固定问题、阅读器、提示与预算,分别干预表示、检索与交付环节。作者报告,表示损失因模态而异,即使给定金标准证据,阅读环节的残余损失仍占主导,拒答能力也偏弱。
要点速读
- MOSAIC 含 923 个问题,历史会话跨 11–24 轮,覆盖文本、图像、视频、音频四种模态。
- 基准构造空间、时间、韵律信号而非装饰性媒体,并对空间信息做因果验证、对标注韵律做选择器级验证。
- 匹配分解显示表示损失与模态相关,金标准证据下阅读环节仍占主导,拒答在对照条件下表现较弱。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/23 08:00:11(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。