中文

Ultraman:兼具超高速与高细节的单图像 3D 人体重建

计算机视觉与模式识别 2024-03-19 v1 人工智能 图像与视频处理

摘要

3D 人体重建一直是计算机视觉领域的挑战。以往方法通常耗时较长,且难以捕捉人体的细节外观。本文提出一种名为 \emph{Ultraman} 的新方法,可从单张图像快速重建带纹理的 3D 人体模型。与现有技术相比,\emph{Ultraman} 在保留高质量纹理细节的同时,大幅提升了重建速度与精度。我们提出了一套由几何重建、纹理生成和纹理映射三部分组成的人体重建新框架。首先,采用网格重建框架从单张图像中精确提取 3D 人体形状。同时,提出一种基于单张图像生成多视角一致人体图像的方法。最后结合一种新颖的纹理映射方法,优化纹理细节并确保重建过程中的颜色一致性。通过大量实验与评估,我们证明了 \emph{Ultraman} 在多个标准数据集上的优越性能。此外,\emph{Ultraman} 在人体渲染质量与速度上均优于 SOTA 方法。文章被接收后,我们将公开代码与数据。

关键词

引用

@article{arxiv.2403.12028,
  title  = {Ultraman: Single Image 3D Human Reconstruction with Ultra Speed and Detail},
  author = {Mingjin Chen and Junhao Chen and Xiaojun Ye and Huan-ang Gao and Xiaoxue Chen and Zhaoxin Fan and Hao Zhao},
  journal= {arXiv preprint arXiv:2403.12028},
  year   = {2024}
}

备注

Project Page: https://air-discover.github.io/Ultraman/