Function4D：基于极稀疏消费级 RGBD 传感器的实时人体体素捕获
计算机视觉与模式识别
2021-05-07 v2
摘要
人体体素捕获是计算机视觉与计算机图形学中的长期课题。尽管使用复杂离线系统可获得高质量结果，复杂场景的实时人体体素捕获，尤其是使用轻量装置，仍具挑战性。本文提出一种结合时序体素融合与深度隐式函数的人体体素捕获方法。为实现高质量且时序连续的重建，我们提出动态滑动融合，将相邻深度观测与拓扑一致性融合。此外，为生成细节完整且精细的表面，我们提出针对 RGBD 输入的细节保持深度隐式函数，其不仅能保持深度输入上的几何细节，还能生成更合理的纹理结果。结果与实验表明，我们的方法在视角稀疏性、泛化能力、重建质量和运行效率方面优于现有方法。
引用
@article{arxiv.2105.01859,
title = {Function4D: Real-time Human Volumetric Capture from Very Sparse Consumer RGBD Sensors},
author = {Tao Yu and Zerong Zheng and Kaiwen Guo and Pengpeng Liu and Qionghai Dai and Yebin Liu},
journal= {arXiv preprint arXiv:2105.01859},
year = {2021}
}
备注
CVPR 2021 Oral Paper, Project Page: http://www.liuyebin.com/Function4D/Function4D.html, THuman2.0 dataset available. Youtube: https://www.youtube.com/watch?v=-rWUn4fEQNU&t=126s