Hi3DGen:通过法线桥接从图像生成高保真3D几何
图形学
2025-04-01 v2 计算机视觉与模式识别
摘要
随着对高保真3D模型从2D图像的需求不断增长,现有方法仍面临在准确再现细粒度几何细节方面存在显著挑战,这源于领域差距和RGB图像固有的模糊性限制。为此,我们提出Hi3DGen,一种通过法线桥接从图像生成高保真3D几何的新型框架。Hi3DGen包含三个关键组件:(1)一种图像到法线估计器,通过解耦低高频图像模式并引入噪声注入和双流训练,实现通用、稳定且锐利的估计;(2)一种法线到几何的学习方法,采用法线正则化潜在扩散学习以增强3D几何生成的保真度;(3)一个3D数据合成管道,用于构建高质量数据集以支持训练。广泛的实验表明,我们的框架在生成丰富几何细节方面有效且优于最先进的方法,在保真度方面表现出色。我们的工作为通过法线图作为中间表征从图像生成高保真3D几何提供了新的方向。
引用
@article{arxiv.2503.22236,
title = {Hi3DGen: High-fidelity 3D Geometry Generation from Images via Normal Bridging},
author = {Chongjie Ye and Yushuang Wu and Ziteng Lu and Jiahao Chang and Xiaoyang Guo and Jiaqing Zhou and Hao Zhao and Xiaoguang Han},
journal= {arXiv preprint arXiv:2503.22236},
year = {2025}
}
备注
https://stable-x.github.io/Hi3DGen