LLM 智能体在仿真中自动生成机器人训练数据,成本低于遥操作。
资讯摘要
论文提出 PyRUA-DataFarm,让编码智能体在收到数据请求和目标场景的一次校准片段后,在仿真中重建任务:编写场景、专家控制器与成功判定器,并由视频模型基于真实图像渲染各相机视角一致的视频,产出可直接训练策略的同步多视角数据。作者报告在五个真实机器人任务上,仅用该数据训练的策略与等量遥操作数据训练的策略表现相当,且在未见桌布与彩色光照下更稳健;单任务适配平均 API 成本 21 美元,后续每回合约 0.8 美元。
要点速读
- 智能体根据一次校准片段在仿真中重建任务,自动编写场景、专家控制器和成功判定器。
- 视频模型以真实图像为条件渲染多视角一致视频,输出带动作标签的同步相机数据,独立评审在入库前认证专家与每个渲染回合。
- 作者报告五个真实任务中农场数据训练策略 100 次试验成功 93 次,遥操作数据为 84 次;未见桌布与彩色光下分别为 87 与 46 次。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/5 08:00:38(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。