回到最新动态
论文更新 / THE SIGNAL

Automotive-ENV:车载座舱多模态模型基准

Automotive-ENV: Benchmarking Multimodal Models in Automotive Cockpit Environments

重要性 5.5 AI 辅助整理

论文发布车载座舱多模态基准,现有模型在安全关键任务上表现不佳。

资讯摘要

论文提出 Automotive-ENV,一个基于 Android Automotive OS 的交互式基准,用于评估多模态模型在车载座舱环境中的表现。该基准包含 420 个任务,覆盖常规座舱操作与安全关键场景,通过 UI 状态、车辆信号和安全条件的可复现验证器进行判定,而非依赖动作匹配或 LLM 评判。作者报告,代表性通用多模态模型与 GUI 专用视觉语言模型在隐式意图和安全关键任务上性能明显下降,并暴露出安全推理、车辆控制理解与隐式风险识别方面的失败模式。

要点速读

  1. 基准基于 Android Automotive OS,结合座舱屏幕交互与车辆状态信号,含 420 个任务。
  2. 采用基于 UI 状态、车辆信号和安全条件的确定性验证器评估,而非动作匹配或 LLM 评判。
  3. 作者报告现有模型在隐式与安全关键任务上性能大幅下降,并存在一致的失败模式。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/28 08:00:17(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开