开源仪表盘VERA将欧盟AI法案要求转为可测评分并缩短评估耗时。
资讯摘要
论文提出开源自托管仪表盘VERA，用于在受监管场景中评估大语言模型部署的负责任AI实践。它基于COMPL-AI对欧盟AI法案的技术解读，对当前基准可测量的12项技术要求打分，并记录每次评估的能耗。作者在一家欧洲大型银行部署该工具，用四个开放权重模型跑通流程；受试者研究显示，使用仪表盘完成评估的平均耗时从56秒降至30秒，组织内问卷的有用性评分为4.36/5。
要点速读
- VERA基于COMPL-AI的六组原则、18项技术要求框架，对其中12项可由现有基准测量的要求给出评分。
- 仪表盘记录每次评估的能耗，为环境影响补充运行级证据；作者用四个已部署的开放权重模型跑通要求流水线。
- 受试者内研究对比原始输出文件与仪表盘两种阅读方式，评估耗时从平均56秒降至30秒，组织内问卷有用性评分4.36/5。
中文摘要由 AI 根据公开来源生成，可能存在理解偏差；具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/24 08:00:37（北京时间）。 arXiv 日期为本次公告时间，论文初次投稿日期请查看原文版本记录。