ROSTrans 显示前沿 LLM 的 ROS1 到 ROS2 迁移 pass@1 低于 10.9%。
资讯摘要
论文提出 ROSTrans,用于评估大模型将 ROS1 代码迁移到 ROS2 的能力。该基准含 108 个补全任务,取自 70 多个开源 ROS1 仓库,按接口、行为、系统三层正确性分类,并为每个任务提供可执行参考实现、运行时测试套件与容器。作者报告六个前沿模型 pass@1 低于 10.9%,56.5% 的样本编译成功但运行时失败,32.0% 在迁移接口的运行时断言上失败;执行引导修复三轮后,Claude Opus 4.6 与 GPT-5.5 的任务成功率分别达 49.1% 和 47.2%。
要点速读
- ROSTrans 含 108 个任务,来自 70 多个开源 ROS1 仓库,按接口、行为、系统三层正确性组织。
- 每个任务配有已验证的 ROS2 参考实现、启动节点并测试话题/服务/动作/参数的运行时测试套件及可复现容器。
- 作者报告六个前沿模型 pass@1 低于 10.9%,56.5% 样本编译成功但运行时失败,32.0% 在迁移接口的运行时断言上失败。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/3 08:00:27(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。