回到最新动态
研究论文 / THE SIGNAL

IntReal:多模态交错生成的真实数据集与基准

IntReal: A Real-World Dataset and Benchmark for Multimodal Interleaved Generation

重要性 5.5 AI 辅助整理

论文发布 IntReal 数据集与七维度评测套件,用于多模态交错生成。

资讯摘要

论文提出 IntReal,用于多模态交错生成的真实数据集与评测基准,包含覆盖四大类别的 IntReal-100K 数据集和七维度评测套件。作者报告该套件指标间冗余低(最大两两绝对 Spearman ρ≤0.42)、与人类判断一致率 83.3%、不同专家评估器间一致性 ρ>0.9;对四类统一多模态模型的基准测试显示各模型优劣不同,后训练实验表明 IntReal-100K 可提升交错生成,且单模态生成训练也有帮助。

要点速读

  1. IntReal 由 IntReal-100K 真实交错样本数据集(四大类别)与七维度评测套件组成。
  2. 作者报告评测套件指标冗余低、与人类判断一致率 83.3%、专家评估器间 Spearman ρ>0.9。
  3. 对四类 UMM 的基准测试显示模型优劣各异;后训练实验显示单模态生成训练也能惠及交错生成。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/31 08:00:16(北京时间)。

阅读 Daily Papers 原文arxiv.org · 在新窗口打开