回到最新动态
论文更新 / THE SIGNAL

SCHEMA:面向科学智能体的拓扑感知幻觉评估框架

Tracing the Cascade: A Topology-Aware Evaluation Framework for Scientific Agent Hallucinations

重要性 5.5 AI 辅助整理

论文提出拓扑感知框架,发现科学智能体幻觉集中于知识枢纽。

资讯摘要

论文提出 SCHEMA,一个基于证据、拓扑感知的科学智能体幻觉评估框架。它从基准种子与文献证据自动构建科学概念图,生成覆盖断言验证、多跳推理、开放式解释和实验代码生成的任务,并用拓扑加权严重度评分审计中间推理、用多智能体反事实归因定位失败机制。作者报告幻觉集中于少数高连接知识枢纽,且最终答案准确率与推理过程诚实度脱钩。

要点速读

  1. SCHEMA 从基准种子和文献证据自动构建科学概念图,并合成图约束任务。
  2. 评估包含轨迹幻觉流水线与多智能体反事实归因两个诊断模块。
  3. 作者报告幻觉集中在少数高连接知识枢纽,最终答案正确不代表推理过程可靠。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/29 08:00:21(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开