回到最新动态
交叉发布 / THE SIGNAL

GroundControl:用卫星图像约束多视角扩散的新视角合成

GroundControl: Satellite-Conditioned Multi-View Diffusion for Reconstruction-Free Novel View Synthesis

重要性 5.5 AI 辅助整理

论文用卫星图像约束多视角扩散,减少户外新视角合成的空间幻觉。

资讯摘要

论文提出 GroundControl,一种卫星条件化的多视角扩散模型,用于户外场景的新视角合成。该方法将卫星图像与街景输入图像共同作为条件,通过交叉注意力注入卫星条件,从而保留预训练多视角扩散先验,在少量源视角下生成连贯且符合卫星所见场景布局的新视角。模型不依赖三维重建,仅使用带位姿的街景与卫星视角。作者报告在户外数据集上优于仅卫星条件或仅街景条件的基线,在目标视角与源视角重叠很少的困难情形下尤其明显。

要点速读

  1. 论文提出卫星条件化多视角扩散模型,结合卫星图像与街景输入图像生成新视角。
  2. 采用交叉注意力注入卫星条件,保留预训练多视角扩散先验,且不使用三维场景重建。
  3. 作者报告在户外数据集上优于卫星条件或街景条件基线,低重叠视角情形提升更明显。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/29 08:00:21(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开