M3DHMR:单目三维手部网格恢复
计算机视觉与模式识别
2025-12-08 v2
摘要
由于手部的高自由度、二维到三维的模糊性以及自遮挡,单目三维手部网格恢复具有挑战性。大多数现有方法在预测三维网格顶点位置时要么效率低下,要么不够直接。因此,我们提出了一种名为单目三维手部网格恢复(M3DHMR)的新流程,以直接估计手部网格顶点的位置。M3DHMR从单张图像中为三维任务提供二维线索,并使用由若干动态螺旋卷积(DSC)层和感兴趣区域(ROI)层组成的新型螺旋解码器。一方面,DSC层根据顶点位置自适应调整权重,并在空间和通道维度上提取顶点特征。另一方面,ROI层利用物理信息,分别在每个预定义的手部区域中细化网格顶点。在流行数据集FreiHAND上的大量实验表明,M3DHMR显著优于最先进的实时方法。
引用
@article{arxiv.2505.20058,
title = {M3DHMR: Monocular 3D Hand Mesh Recovery},
author = {Yihong Lin and Xianjia Wu and Xilai Wang and Jianqiao Hu and Songju Lei and Xiandong Li and Wenxiong Kang},
journal= {arXiv preprint arXiv:2505.20058},
year = {2025}
}
备注
9 pages, 5 figures