回到最新动态
论文更新 / THE SIGNAL

LLM 在可视化 DSL 上的失败模式研究

Where LLMs Fail with Visualization DSLs

重要性 5.0 AI 辅助整理

论文归纳出 LLM 使用可视化 DSL 时的四类失败模式。

资讯摘要

论文评估了 10 种 JSON 风格可视化 DSL 在 3 个 LLM 上的 41 项任务表现,通过 JSON 校验、渲染检查和失败案例定性编码,归纳出四类反复出现的失败模式,并将每类失败与具体 DSL 特性关联,进而讨论未来 DSL 设计考量。

要点速读

  1. 论文用 10 种 JSON 风格可视化 DSL、41 项任务和 3 个 LLM 进行评测。
  2. 作者通过 JSON 与渲染检查及失败案例定性编码,识别出四类反复出现的失败模式。
  3. 论文将失败模式与具体 DSL 特性关联,并提出未来 DSL 设计建议。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/28 08:00:17(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开