决策模型与LLM在法律权威缺失时的弃权表现

无正确权威时生成式LLM仍强行作答，决策模型更易弃权。

资讯摘要

论文关注法律AI在正确权威缺失时能否弃权。作者将CaseHOLD扩展出弃权条件，在5314条中替换1670条的正确判决，比较四个决策模型与六个生成式LLM。结果显示无正确选项时，生成式LLM仍有38%至86%的条目强行选择，最谨慎的决策模型为30%。标准CaseHOLD上决策模型与最佳生成式LLM持平（88.1%对88.2%），成本仅为其1/55。

要点速读

1. 论文将CaseHOLD扩展出弃权条件，在5314条中替换1670条的正确判决。
2. 无正确选项时，生成式LLM在38%至86%的条目中仍会选一项，最谨慎的决策模型为30%。
3. 标准CaseHOLD上决策模型达88.1%，与最佳生成式LLM的88.2%相当，成本为其1/55。

中文摘要由 AI 根据公开来源生成，可能存在理解偏差；具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/23 08:00:11（北京时间）。 arXiv 日期为本次公告时间，论文初次投稿日期请查看原文版本记录。