论文提出伊博文化基准，发现语言流利不等于文化理解。
资讯摘要
论文以伊博语为案例，指出现有基准多测试翻译后的西方概念、缺乏深度，因而提出 CAB-Igbo：该基准取材于本土文化资料，由母语者核验，覆盖六个领域。作者在多种条件下评测多个模型并加入地域人格设定，采用选择题准确率与人工评价（认知忠实度、表征丰富度、语言质量、语用能力）。结果显示语言流利度与文化知识明显脱节，多数模型在英语下已缺乏认知忠实度与表征丰富度，切换伊博语并未显著恶化，主要损害语言质量与语用能力。
要点速读
- 论文提出 CAB-Igbo 基准，取材本土文化资料并由母语者核验，覆盖六个领域。
- 作者报告语言流利度与文化知识存在明显脱节，多数模型在英语下已缺乏认知忠实度与表征丰富度。
- 作者称 Gemini 2.0 Flash 是唯一在伊博语提示下文化知识得分提升的模型，并指出自动评判在语言质量上与人类一致、在认知忠实度上不一致。
中文摘要由 AI 根据公开来源生成，可能存在理解偏差；具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/28 08:00:17（北京时间）。 arXiv 日期为本次公告时间，论文初次投稿日期请查看原文版本记录。