中文

3D 生成式 AI 的进展与展望:包含 3D 人体的技术综述

人工智能 2024-01-08 v1 图形学

摘要

虽然 AI 生成的文本和 2D 图像继续扩大其领域,3D 生成已逐渐成为一个不可忽视的趋势。自 2023 年以来,3D 生成领域涌现了大量研究论文。这种增长不仅涵盖 3D 物体的创建,还包括 3D 角色和动作生成的快速发展。几个关键因素促成了这一进步。Stable Diffusion 中保真度的提高,加上确保多视角一致性的控制方法,以及像 SMPL-X 这样的逼真人体模型,协同作用生产出具有显著一致性和接近真实外观的 3D 模型。基于神经网络的 3D 存储和渲染模型(如神经辐射场 NeRF 和 3D 高斯泼溅 3DGS)的进步,加速了神经渲染模型的效率和真实感。此外,大语言模型的多模态能力使得语言输入能够转化为人体动作输出。本文旨在全面概述和总结主要在 2023 年下半年发表的相关论文。文章将首先讨论 AI 生成的 3D 物体模型,其次是生成的 3D 人体模型,最后是生成的 3D 人体动作,并以结论性总结和未来展望作为结束。

关键词

引用

@article{arxiv.2401.02620,
  title  = {Progress and Prospects in 3D Generative AI: A Technical Overview including 3D human},
  author = {Song Bai and Jie Li},
  journal= {arXiv preprint arXiv:2401.02620},
  year   = {2024}
}