回到最新动态
研究论文 / THE SIGNAL

Schema Coherence Inventory:测量语言模型被赋予的信念是否组织其认知

The Schema Coherence Inventory: Measuring Whether an Assigned Belief Organizes a Language Model's Cognition

重要性 5.5 AI 辅助整理

新量表测量模型被赋予的信念是否真正组织其行为。

资讯摘要

论文提出 Schema Coherence Inventory(SCI),用 96 道强制选择题测量被赋予的信念是否真正组织语言模型行为,而非仅改变情绪。作者报告在五个 1.7B–14B 参数骨干上开展六项验证研究、覆盖 107 个条件;九名临床受训评分者以 79.5% 复原关键信念(随机为 16.7%),信念适配器在各骨干上均具目标特异性。应用于六个已发表的病人模拟器时,均未比一句话陈述更好地承载其设定的核心信念。作者发布题目、评分代码与简版。

要点速读

  1. SCI 含 96 道强制选择题,对应 Beck 认知模型八个层级,以长度归一化对数似然评分,不生成也不解析文本。
  2. 九名临床受训评分者以 79.5% 复原关键信念(随机 16.7%);信念适配器在全部骨干上目标特异(+17.7 点,30/30 信念单元为正)。
  3. 应用于六个已发表病人模拟器,均未比一句话陈述更好地承载其设定的核心信念;48 题简版与另 48 题相关 r=0.73。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/27 08:00:28(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开