Plan2Scene:将平面图转换为 3D 场景
计算机视觉与模式识别
2021-06-11 v1 图形学
摘要
我们解决将住宅的平面图及一组相关照片转换为带纹理 3D 网格模型的任务,我们称之为 Plan2Scene。我们的系统 1)将平面图图像提升为 3D 网格模型;2)基于输入照片合成表面纹理;3)使用图神经网络架构推断未观测表面的纹理。为训练与评估我们的系统,我们创建了室内表面纹理数据集,并用校正表面裁剪与额外标注扩充了先前工作的平面图与照片数据集。我们的方法处理了从仅部分覆盖住宅的稀疏未对齐照片中为地板、墙壁与天花板等主导表面生成可平铺纹理的挑战。定性与定量评估表明,我们的系统生成逼真的 3D 室内模型,在一系列纹理质量指标及整体用户研究中均优于基线方法。
引用
@article{arxiv.2106.05375,
title = {Plan2Scene: Converting Floorplans to 3D Scenes},
author = {Madhawa Vidanapathirana and Qirui Wu and Yasutaka Furukawa and Angel X. Chang and Manolis Savva},
journal= {arXiv preprint arXiv:2106.05375},
year = {2021}
}
备注
This paper is accepted to CVPR 2021. For code, data and pretrained models, see https://3dlg-hcvc.github.io/plan2scene/