研究评估Google医疗AI Overviews的引用质量与准确性

研究称Google医疗AI概览引用质量与医生评分准确性均偏低。

资讯摘要

一篇论文评估了Google AI Overviews在3611个基准健康问题上的表现：96.4%的问题出现概览，但其引用的证据与传统搜索前五结果差异明显，仅44.4%的前五结果被引用，且更偏向商业健康出版商而非学术与政府来源。论文报告，经校正分类器误差后约56.7%的引用陈述获所引页面支持，另有20.8%的事实性陈述完全无引用；按医生评分标准仅获38.2%的分数，在预期含有害内容的子集中22.2%的概览确实包含该内容。

要点速读

1. 论文评估3611个健康问题：96.4%出现AIO，但仅44.4%的传统搜索前五结果被其引用，商业健康出版商被过度代表。
2. AIO引用页面在六项可信度标准中的四项上低于传统搜索结果；约56.7%的引用陈述获来源支持，20.8%的事实陈述无引用。
3. 按医生评分标准AIO仅得38.2%的分数（准确性54.2%、完整性21.6%），且准确性与其陈述的引用支撑度无关。

中文摘要由 AI 根据公开来源生成，可能存在理解偏差；具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/31 08:00:18（北京时间）。 arXiv 日期为本次公告时间，论文初次投稿日期请查看原文版本记录。