论文评估多类 LLM 的阿拉伯方言翻译，指出方言多样性仍是难点
资讯摘要
论文在 MADAR 数据集上评估大语言模型英阿双向方言机器翻译，覆盖 16 种阿拉伯方言，涉及 Jais、Nile 等阿拉伯专用模型，Gemma、Command-R、Mistral、Aya 等多语言模型及 GPT-4.1 商业 API。作者采用 BLEU、CHRF、COMET（含无参考变体）、GEMBA 及小规模人工评估，并测试模型判别文本方言的能力。论文指出方言多样性处理仍是难点，结果可能受训练数据污染影响。
要点速读
- 评估覆盖 16 种阿拉伯方言的英阿双向翻译，使用 MADAR 数据集
- 对比阿拉伯专用模型、多语言模型与 GPT-4.1 商业 API
- 采用 BLEU、CHRF、COMET、GEMBA 及小规模人工评估，并测试方言分类能力
中文摘要由 AI 根据公开来源生成，可能存在理解偏差；具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/4 08:00:28（北京时间）。 arXiv 日期为本次公告时间，论文初次投稿日期请查看原文版本记录。