同一概率换得失表述,约三成LLM建议类别改变。
资讯摘要
论文关注同一概率以收益或损失框架表达时,LLM在高风险决策建议上是否保持一致。作者构建FrameBench-HPS基准,含医疗、金融、教育/职业、法律/消费者权益四领域的240个高风险场景、2880条提示,测试七个LLM。结果显示,在完整组中32.4%的建议类别因得失框架而改变,多数变化涉及不确定性而非直接反转;人工评估确认感知风险与指令性相应变化。框架效应在对话改写下仍存在,且超过普通重复生成波动;概率规范化可显著降低框架敏感性。
要点速读
- 论文提出FrameBench-HPS基准,覆盖医疗、金融、教育/职业、法律/消费者权益四领域240个高风险场景,共2880条提示。
- 在七个LLM上,32.4%的完整组因得失框架改变建议类别,多数变化涉及不确定性而非直接反转。
- 框架效应在对话改写下持续存在并超过重复生成波动,概率规范化可显著降低框架敏感性。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/23 08:00:11(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。