同一戒烟问题,六款大模型因用户人设不同给出不同建议。
资讯摘要
一篇论文审计了来自四家提供商的六款大模型在戒烟建议上的表现:向十二种不同人设提出同样四个戒烟问题,共获得2880条回答。作者报告,所有模型对青少年人设提及FDA批准处方戒烟药物的比例比成人人设低32至67个百分点;六款模型中有五款对自称具备医疗专业知识的用户给出更少事实。论文还测试了一段规定“事实底线”的系统提示,发现它能缩小人设差异,但对整体事实覆盖的影响因模型而异。
要点速读
- 论文对六款模型、十二种人设、四个戒烟问题共收集2880条回答,并公开数据与分析代码。
- 作者报告所有模型对青少年人设提及FDA批准处方戒烟药的比例比成人人设低32至67个百分点。
- 论文提出“事实底线”系统提示可缩小人设差异,但其对事实覆盖的效果在不同模型间方向和幅度不一。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/3 08:00:27(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。