零样本按子句拆分指令重排序，WISE 达 50.9
资讯摘要
论文提出 DMReranker，一种零样本重排序器：把带指令的查询拆成主题和若干带类型的子句，由小型评判模型逐条回答一个窄问题，再将各答案概率相乘得到总分，全程不训练。作者报告在 InfoSearch 六个维度上宏平均 WISE 为 50.9，原始模式 nDCG@10 为 82.9；严格指令合规率 SICR 为 19.2，低于 GPT-4o 的 32.1，按排名计算则为 67.0。
要点速读
- 论文称在 InfoSearch 上，GPT-4o 作为列表式重排序器的平均 WISE 仅 33.5。
- DMReranker 不训练、配置在测试前冻结，重排与基线相同的 top-100 候选。
- 同一评判模型下，拆分指令使 WISE 从 32.9 升至 47.6，但原始分数 SICR 下降；六维度打分按标价约 10 美元。
中文摘要由 AI 根据公开来源生成，可能存在理解偏差；具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/4 08:00:28（北京时间）。 arXiv 日期为本次公告时间，论文初次投稿日期请查看原文版本记录。