Ultraman:兼具超高速与高细节的单图像 3D 人体重建
计算机视觉与模式识别
2024-03-19 v1 人工智能
图像与视频处理
摘要
3D 人体重建一直是计算机视觉领域的挑战。以往方法通常耗时较长,且难以捕捉人体的细节外观。本文提出一种名为 \emph{Ultraman} 的新方法,可从单张图像快速重建带纹理的 3D 人体模型。与现有技术相比,\emph{Ultraman} 在保留高质量纹理细节的同时,大幅提升了重建速度与精度。我们提出了一套由几何重建、纹理生成和纹理映射三部分组成的人体重建新框架。首先,采用网格重建框架从单张图像中精确提取 3D 人体形状。同时,提出一种基于单张图像生成多视角一致人体图像的方法。最后结合一种新颖的纹理映射方法,优化纹理细节并确保重建过程中的颜色一致性。通过大量实验与评估,我们证明了 \emph{Ultraman} 在多个标准数据集上的优越性能。此外,\emph{Ultraman} 在人体渲染质量与速度上均优于 SOTA 方法。文章被接收后,我们将公开代码与数据。
引用
@article{arxiv.2403.12028,
title = {Ultraman: Single Image 3D Human Reconstruction with Ultra Speed and Detail},
author = {Mingjin Chen and Junhao Chen and Xiaojun Ye and Huan-ang Gao and Xiaoxue Chen and Zhaoxin Fan and Hao Zhao},
journal= {arXiv preprint arXiv:2403.12028},
year = {2024}
}
备注
Project Page: https://air-discover.github.io/Ultraman/