MLPHand：基于 MLP 模型的实时多视角 3D 手部网格重建
计算机视觉与模式识别
2024-06-25 v1
摘要
多视角手部网格重建是虚拟现实和人机交互等应用中的关键任务，但仍具有残酷的挑战。尽管现有的多视角手部重建方法取得了显著的精度，但通常伴随计算密集，妨碍实时推理。为此，我们提出 MLPHand，一种旨在实现实时单手多视角重建的新方法。MLPHand由两个主要模块组成：(1) 基于轻量级 MLP 的 Skeleton2Mesh 模型，有效地从手骨恢复手部网格；(2) 多视角几何特征融合预测模块，利用来自多个视角的详细几何信息增强 Skeleton2Mesh 模型。在三个广泛使用的数据集上的实验表明，MLPHand 可将计算复杂度降低 90%，同时保持与现有最先进基准相当的重建精度。
引用
@article{arxiv.2406.16137,
title = {MLPHand: Real Time Multi-View 3D Hand Mesh Reconstruction via MLP Modeling},
author = {Jian Yang and Jiakun Li and Guoming Li and Zhen Shen and Huai-Yu Wu and Zhaoxin Fan and Heng Huang},
journal= {arXiv preprint arXiv:2406.16137},
year = {2024}
}