中文

BodyShapeGPT:使用 LLM 对 SMPL 人体形状进行操作

计算与语言 2024-10-07 v1 计算机视觉与模式识别 机器学习

摘要

生成式 AI 模型提供了广泛的工具,可在人类所需时间的分数内完成复杂任务。其中,大语言模型(LLM)在生成多样化文本方面尤为突出,涵盖从文学叙述到不同知识领域的专业响应。本文探讨使用微调后的 LLM 来识别人物的物理描述,然后通过推断形状参数创建基于 SMPL-X 模型的准确人体代表。我们展示了 LLM 可被训练以理解和操作 SMPL 的形状空间,从而通过自然语言控制 3D 人体形状。该方法有望改善人机交互,为虚拟环境中的定制和仿真开辟新方向。

关键词

引用

@article{arxiv.2410.03556,
  title  = {BodyShapeGPT: SMPL Body Shape Manipulation with LLMs},
  author = {Baldomero R. Árbol and Dan Casas},
  journal= {arXiv preprint arXiv:2410.03556},
  year   = {2024}
}

备注

Accepted to ECCV 2024 Workshop on Foundation Models for 3D Humans. Code repository: https://github.com/baldoarbol/BodyShapeGPT