投影式城市纹理生成
计算机视觉与模式识别
2022-02-08 v2
摘要
本文提出一种用于沉浸式城市场景中三维城市网格自动生成纹理的方法。许多近期流程利用扫描仪或程序化建模流程捕获或合成大量城市几何。此类几何精细且逼真，然而为如此大规模场景生成照片级真实纹理仍是一个问题。我们提出由现成的捕捉城市环境的全景照片数据集中存在的纹理风格驱动，为输入目标三维网格生成纹理。将此类二维数据集重定向至三维几何具有挑战性，因为照片中城市结构的底层形状、尺寸与布局与目标网格中的并不对应。照片中还常包含目标几何中甚至可能不存在的物体（例如树木、车辆）。为解决这些问题，我们提出一种称为投影式城市纹理生成（Projective Urban Texturing, PUT）的方法，其将真实世界全景图像的纹理风格重定向至未见过的城市网格。PUT依赖于为无配对图像到纹理翻译设计的神经架构的对比与对抗训练。生成的纹理存储于应用于目标三维网格几何的纹理图集中。为促进纹理一致性，PUT采用迭代过程，其中纹理合成以先前生成的相邻纹理为条件。我们展示了生成纹理的定量与定性评估。
引用
@article{arxiv.2201.10938,
title = {Projective Urban Texturing},
author = {Yiangos Georgiou and Melinos Averkiou and Tom Kelly and Evangelos Kalogerakis},
journal= {arXiv preprint arXiv:2201.10938},
year = {2022}
}