uLayout：面向透视图像与全景图像的统一房间布局估计
计算机视觉与模式识别
2025-03-28 v1
摘要
我们提出了 uLayout，一个用于从透视图像和全景图像中估计房间布局几何的统一模型，而传统解决方案需要针对每种图像类型设计不同的模型。我们解决方案的关键思想是将两个领域统一到等距柱状投影中，特别是将透视图像分配到最合适的纬度坐标，以有效地无缝利用两个领域。为了解决输入领域之间的视场差异，我们设计了 uLayout，它具有一个共享的特征提取器以及一个额外的 1D-Convolution 层，以对每个领域的输入进行不同的条件化处理。这种条件化使我们能够针对任意 FoV 输入，有效地将其表述为按列特征回归问题。这种简单而有效的方法取得了与当前 SOTA 解决方案相媲美的性能，并首次展示了适用于这两个领域的单一端到端模型。在真实世界数据集 LSUN、Matterport3D、PanoContext 和 Stanford 2D-3D 上的大量实验证实了我们方法的贡献。代码可在 https://github.com/JonathanLee112/uLayout 获取。
引用
@article{arxiv.2503.21562,
title = {uLayout: Unified Room Layout Estimation for Perspective and Panoramic Images},
author = {Jonathan Lee and Bolivar Solarte and Chin-Hsuan Wu and Jin-Cheng Jhang and Fu-En Wang and Yi-Hsuan Tsai and Min Sun},
journal= {arXiv preprint arXiv:2503.21562},
year = {2025}
}
备注
Accepted to WACV-2025