回到最新动态
交叉发布 / THE SIGNAL

Jev 跨原语一致性基准 PrimaCons

Cross-Primitive Consistency in Jev

重要性 5.0 AI 辅助整理

论文提出 PrimaCons 基准并发现 Jev 跨原语决策不一致。

资讯摘要

论文指出,Jev 通过类型化查询原语让同一语义状态以二选一、多选等不同格式表达,但跨原语决策一致性尚未被系统评估。作者提出四轴基准 PrimaCons,在三种 Jev 规模上均发现一致性违背,且跨原语差异预测决策失败的 ROC-AUC 为 0.91。作者提出 CPRC,在冻结主干上附加轻量残差网络联合优化准确率与一致性,报告不一致性降低 58.57%、准确率提升 2.97%。

要点速读

  1. 论文提出 PrimaCons 四轴基准,用于在保持查询语义的前提下评估跨原语一致性。
  2. 在三种 Jev 规模上均观察到四个轴的一致性违背,且跨原语差异预测决策失败的 ROC-AUC 为 0.91。
  3. 作者提出 CPRC,在留一领域协议下报告不一致性降低 58.57%、准确率提升 2.97%。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/31 08:00:18(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开