回到最新动态
交叉发布 / THE SIGNAL

HistGramBench:多模态模型将历史数学图重绘为TikZ时的结构还原评测

HistGramBench: Measuring Structural Recovery When Multimodal Models Redraw Historical Mathematical Diagrams as TikZ

重要性 5.2 AI 辅助整理

新基准评测多模态模型重绘历史数学图的结构还原能力。

资讯摘要

论文提出 HistGramBench,收录1551至1933年间95部作品、8种语言的2507幅历史数学图,用于评测多模态模型把扫描图重绘为TikZ绘图程序时能否还原图中结构关系。评测用两个不同厂商的AI模型就图中事实达成一致作为校验依据,并检查模型自身绘图是否满足这些事实。作者报告在六个低成本模型上,最佳模型约还原五分之三的事实,漏检多来自未生成绘图的程序,平行与相切关系最难还原。

要点速读

  1. 基准包含1551至1933年间95部作品、8种语言的2507幅图。
  2. 以两个不同厂商模型对图中事实的一致判断作为校验依据,并在模型生成的绘图上核对。
  3. 作者报告六个低成本模型中最佳者约还原五分之三事实,平行与相切关系最难还原。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/4 08:00:28(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开