回到最新动态
交叉发布 / THE SIGNAL

MedConstBench:评估宪法如何引导LLM的医疗伦理行为

MedConstBench: Benchmarking How Constitutions Steer LLMs in Medical Ethics

重要性 5.5 AI 辅助整理

论文提出将部署宪法作为变量的医疗伦理基准MedConstBench。

资讯摘要

论文提出MedConstBench,一个将部署宪法作为受控变量的医疗伦理基准,围绕Beauchamp四原则组织,采用人工校准的多模型同行评审打分,并包含自建临床困境数据集MedDilemma。作者在四种宪法下评测十个开源LLM,报告宪法的影响具有维度选择性和模型依赖性,没有普遍最优的宪法;据此提出按模型选择宪法的do-no-harm自适应选择器,称其可匹配逐模型最优并保证最差情况下限。

要点速读

  1. MedConstBench将部署宪法作为受控变量,按Beauchamp四原则组织,并用人工校准的多模型同行评审评分。
  2. 作者在四种宪法下评测十个开源LLM,报告宪法效果因伦理维度和模型而异,不存在普遍最优宪法。
  3. 论文提出do-no-harm自适应选择器,为每个模型选择宪法,作者称可匹配逐模型最优并保证最差情况下限。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/29 08:00:21(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开