中文

Infinite Nature:从单张图像对自然场景的永续视角生成

计算机视觉与模式识别 2021-12-02 v4 图形学

摘要

我们提出永续视角生成问题——给定单张图像,针对任意长相机轨迹生成新视角的长程生成。这是一个极具挑战性的问题,远超当前视角合成方法的能力,后者在面临大幅相机运动时迅速退化。视频生成方法生成长序列的能力也有限,且常忽略场景几何。我们采用一种混合方法,在迭代的“渲染、精炼、重复”框架中集成几何与图像合成,从而实现覆盖大幅距离、历经数百帧的长程生成。我们的方法可从一组单目视频序列训练得到。我们提出一个海岸场景航拍视频数据集,并将我们的方法与近期视角合成及条件视频生成基线比较,表明相比现有方法,它能在大幅相机轨迹上以更长的时间范围生成合理场景。项目页见 https://infinite-nature.github.io/。

关键词

引用

@article{arxiv.2012.09855,
  title  = {Infinite Nature: Perpetual View Generation of Natural Scenes from a Single Image},
  author = {Andrew Liu and Richard Tucker and Varun Jampani and Ameesh Makadia and Noah Snavely and Angjoo Kanazawa},
  journal= {arXiv preprint arXiv:2012.09855},
  year   = {2021}
}

备注

ICCV 2021 (oral); Project page: https://infinite-nature.github.io/; Video: https://www.youtube.com/watch?v=oXUf6anNAtc