注意力图熵值可判断何时该用思维链,免训练提升推理分割效率。
资讯摘要
论文指出多模态大模型在推理分割中无条件使用思维链会引发“过度思考”,导致查询意图与视觉定位错位。作者提出免训练的难度感知框架DA-CoT,利用注意力图熵值判断输入难度:低熵表示定位自信,高熵则触发CoT。另设双向重思机制,在初次输出失败时翻转推理决策。作者报告该方法在推理分割基准上达到最优性能并提升推理效率。
要点速读
- 论文发现无条件使用CoT会因过度思考而降低推理分割性能
- DA-CoT以注意力图熵值作为难度信号,选择性触发CoT,无需训练
- 引入双向重思机制,在输出失败时自动翻转推理决策
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/3 08:00:27(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。