BerfScene:用于无限3D场景生成的BEV条件等变辐射场
计算机视觉与模式识别
2023-12-05 v1
摘要
生成大规模3D场景不能简单地应用现有的3D对象合成技术,因为3D场景通常具有复杂的空间配置,并且由不同尺度的众多对象组成。因此,我们提出了一种实用且高效的3D表示,该表示在鸟瞰图(BEV)地图的引导下结合了等变辐射场。具体而言,通过操纵相应的BEV地图,可以轻松操控合成3D场景中的对象。此外,通过将位置编码和低通滤波器充分结合到生成器中,该表示对给定的BEV地图变得等变。这种等变性允许我们通过合成局部场景然后将它们平滑一致地拼接起来,从而生成大规模甚至无限尺度的3D场景。在3D场景数据集上的大量实验证明了我们方法的有效性。我们的项目网站位于 https://zqh0253.github.io/BerfScene/。
引用
@article{arxiv.2312.02136,
title = {BerfScene: Bev-conditioned Equivariant Radiance Fields for Infinite 3D Scene Generation},
author = {Qihang Zhang and Yinghao Xu and Yujun Shen and Bo Dai and Bolei Zhou and Ceyuan Yang},
journal= {arXiv preprint arXiv:2312.02136},
year = {2023}
}