回到信息流
研究论文 / THE SIGNAL

PatternBench:评估LLM代码优化的编译器超越语义推理

Pattern-Driven Evaluation of LLM Code Optimization: Isolating Compiler-Transcendent Semantic Reasoning

AI 辅助整理

资讯摘要

论文提出PatternBench基准,用于研究“编译器超越”优化,即经激进编译器优化后仍存在的性能提升。该基准覆盖七类变换的残余优化机会,结合运行时评估与基于AST的优化忠实度分析,检验生成程序是否真正实现目标优化。作者报告,对前沿、开放权重和微调模型的实验显示,仅看运行时加速无法完整反映优化能力,优化忠实度与实测加速强相关,微调可同时提升忠实度与优化效果。

要点速读

  • 论文提出PatternBench,针对七类变换的残余优化机会,结合运行时评估与基于AST的优化忠实度分析。
  • 作者报告,仅凭运行时加速无法完整刻画LLM的优化能力,优化忠实度与实测加速强相关。
  • 作者报告,微调可同时提升优化忠实度与优化效果。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/20 21:06:32(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开