回到最新动态
研究论文 / THE SIGNAL

采集日期元数据可改变时序问答答案

Collection-Date Assignment Redirects Answers in Temporal QA

重要性 5.5 AI 辅助整理

仅调换采集日期元数据即可使时序问答EM大幅下降。

资讯摘要

一篇论文提出,采集日期记录的是来源版本的获取时间,而非内容变更时间,但仅调换该元数据即可改变时序问答结果。作者报告,在595个维基百科页面上交换问题日与次日对应的两个版本,五个开放权重LLM的后续引用精确匹配(EM)下降37.6–51.4个百分点,并在128个不重叠页面上复现;前一日交换在497个页面上仍造成29.0–39.6个百分点损失。七种提示变体仍保留该效应。

要点速读

  1. 交换问题日与次日对应的两个版本后,五个开放权重LLM在595个维基百科页面上的后续引用EM下降37.6–51.4个百分点,并在128个不重叠页面上复现。
  2. 前一日交换在497个页面上仍造成29.0–39.6个百分点损失;七种提示变体(含显式忽略采集日期指令与归档版本溯源)仍保留该效应。
  3. 匹配思考使Qwen3.5的损失从30.1降至11.1个百分点;两个API LLM在维基百科交换中效应较小,且很少在虚构记录上转向更早答案。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/27 08:00:28(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开