中文

3D 照片风格化:从单幅图像学习生成风格化新视角

计算机视觉与模式识别 2021-12-07 v2 图形学

摘要

鉴于在移动摄影与 AR/VR 中的应用,视觉内容创作引发了激增的兴趣。风格迁移与单图像 3D 摄影作为两个代表性任务迄今独立演进。本文建立二者联系,并解决具挑战性的 3D 照片风格化任务——给定任意风格从单幅图像生成风格化新视角。我们的核心直觉是,风格迁移与视角合成必须为此任务联合建模。为此,我们提出一种深度模型,从场景点云表示中学习用于风格化的几何感知内容特征,生成跨视角一致的高质量风格化图像。进一步,我们引入一种仅用 2D 图像即可实现学习的新型训练协议。我们通过广泛定性定量研究证明方法优越性,并鉴于从 2D 图像资产进行 3D 内容创作需求增长展示了方法关键应用。

关键词

引用

@article{arxiv.2112.00169,
  title  = {3D Photo Stylization: Learning to Generate Stylized Novel Views from a Single Image},
  author = {Fangzhou Mu and Jian Wang and Yicheng Wu and Yin Li},
  journal= {arXiv preprint arXiv:2112.00169},
  year   = {2021}
}

备注

Project page: http://pages.cs.wisc.edu/~fmu/style3d/