论文用卫星图像约束多视角扩散,减少户外新视角合成的空间幻觉。
资讯摘要
论文提出 GroundControl,一种卫星条件化的多视角扩散模型,用于户外场景的新视角合成。该方法将卫星图像与街景输入图像共同作为条件,通过交叉注意力注入卫星条件,从而保留预训练多视角扩散先验,在少量源视角下生成连贯且符合卫星所见场景布局的新视角。模型不依赖三维重建,仅使用带位姿的街景与卫星视角。作者报告在户外数据集上优于仅卫星条件或仅街景条件的基线,在目标视角与源视角重叠很少的困难情形下尤其明显。
要点速读
- 论文提出卫星条件化多视角扩散模型,结合卫星图像与街景输入图像生成新视角。
- 采用交叉注意力注入卫星条件,保留预训练多视角扩散先验,且不使用三维场景重建。
- 作者报告在户外数据集上优于卫星条件或街景条件基线,低重叠视角情形提升更明显。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/29 08:00:21(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。