证据覆盖率高不等于答案更好,全文扫描延迟与成本更高。
资讯摘要
论文比较11种长文档检索配置,涵盖词法与稠密检索、混合重排及全文扫描,使用396道QASPER问题和8本完整教材的80道题评测。作者报告:书籍场景下Hybrid+Jev证据覆盖率最高(94.1%),高于Jev全文扫描的88.7%和OpenAI稠密检索的81.3%;但覆盖率更高并不总带来更好答案,Hybrid+Decisions答案准确率最高(0.892)。全文扫描延迟明显更高,可复用稠密检索的预计API成本随查询累积低于付费决策方法。
要点速读
- 评测覆盖11种检索配置,使用396道QASPER问题与8本教材的80道题,固定答案生成器并限制五段证据。
- 书籍场景中Hybrid+Jev证据覆盖率94.1%,Jev全文扫描88.7%,OpenAI稠密检索81.3%。
- Hybrid+Decisions书籍答案准确率0.892为检索方法中最高,但恢复的参考证据较少;全文扫描延迟显著更高。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/23 08:00:11(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。