论文发布 IntReal 数据集与七维度评测套件,用于多模态交错生成。
资讯摘要
论文提出 IntReal,用于多模态交错生成的真实数据集与评测基准,包含覆盖四大类别的 IntReal-100K 数据集和七维度评测套件。作者报告该套件指标间冗余低(最大两两绝对 Spearman ρ≤0.42)、与人类判断一致率 83.3%、不同专家评估器间一致性 ρ>0.9;对四类统一多模态模型的基准测试显示各模型优劣不同,后训练实验表明 IntReal-100K 可提升交错生成,且单模态生成训练也有帮助。
要点速读
- IntReal 由 IntReal-100K 真实交错样本数据集(四大类别)与七维度评测套件组成。
- 作者报告评测套件指标冗余低、与人类判断一致率 83.3%、专家评估器间 Spearman ρ>0.9。
- 对四类 UMM 的基准测试显示模型优劣各异;后训练实验显示单模态生成训练也能惠及交错生成。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/31 08:00:16(北京时间)。