回到最新动态
交叉发布 / THE SIGNAL

文本转SQL模型隐式选择计算口径

Text-to-SQL Models Make Choices Without Saying So

重要性 5.5 AI 辅助整理

文本转SQL模型常隐式选定计算口径且不说明,差距在报告而非计算。

资讯摘要

论文指出,文本转SQL请求若未明确计算口径(如按行计数还是按去重实体计数),模型会自行选定一种解释却不加说明,标准基准因只对照单一参考答案而无法发现。作者提出SpecBridge:对同一请求分别构造开放口径与两种明确口径的版本,通过实际执行SQL评分。在204个手工验证测试中,四个语言模型被明确要求时通常能算出各口径,但面对开放请求仅15%–58%的情况下同时给出两种结果,且常不提及选择;差距在于报告而非计算。作者报告,先判断请求是否留有口径选择、再分次回答各解释,可使开放请求获得全部解释的比例较生产助手提升29–63个百分点,且不降低明确请求的精确率。

要点速读

  1. SpecBridge用同一请求的开放口径版与两种明确口径版对比,按执行结果评分,数据库为真实数据。
  2. 204个手工验证测试中,四个模型对开放请求同时给出两种解释的比例仅15%–58%,常不说明所选口径。
  3. 作者报告,先判断是否存在口径选择再分次作答,开放请求覆盖全部解释的比例提升29–63个百分点,且不降低明确请求精确率。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/5 08:00:38(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开