全捕获：用于跟踪人脸、手与身体的三维形变模型
计算机视觉与模式识别
2018-01-08 v1
摘要
我们提出了一种统一的形变模型，用于无标记捕获多尺度人体运动，包括面部表情、身体运动和手势。初始模型通过局部缝合人体各部位的独立模型生成，我们称之为“Frankenstein”模型。该模型通过单一无缝模型实现包括面部和手部在内的部位运动的完整表达。利用对穿着日常服装人群的大规模捕获，我们优化Frankenstein模型以创建“Adam”。Adam是一个标定模型，与初始模型共享相同骨架层级，但可表达头发与服装几何，从而可直接用于拟合人们日常状态下的外观。最后，我们展示了这些模型在全运动跟踪中的使用，同时捕获社交群体中人们的大尺度身体运动以及细微的面部和手部运动。
引用
@article{arxiv.1801.01615,
title = {Total Capture: A 3D Deformation Model for Tracking Faces, Hands, and Bodies},
author = {Hanbyul Joo and Tomas Simon and Yaser Sheikh},
journal= {arXiv preprint arXiv:1801.01615},
year = {2018}
}