中文

面向铰接 3D 形状的深层虚拟标记

计算机视觉与模式识别 2021-08-23 v1

摘要

我们提出深层虚拟标记,一个用于为各类 3D 数据估计密集且准确位置信息的框架。我们设计了一种概念并构建了一个框架,将人体等 3D 铰接模型的 3D 点映射为虚拟标记标签。为实现该框架,我们采用稀疏卷积神经网络,并将铰接模型的 3D 点分类为虚拟标记标签。我们提出使用软标签,使分类器基于测地距离学习丰富而密集的类别间关系。为衡量虚拟标记的定位精度,我们测试了 FAUST 挑战,结果优于当前最优方法。我们还观察到在泛化性测试、未见过数据评估以及不同 3D 数据类型(网格与深度图)上的出色表现。我们展示了利用估计的虚拟标记的附加应用,如非刚性配准、纹理迁移以及从深度图实时密集标记预测。

关键词

引用

@article{arxiv.2108.09000,
  title  = {Deep Virtual Markers for Articulated 3D Shapes},
  author = {Hyomin Kim and Jungeon Kim and Jaewon Kam and Jaesik Park and Seungyong Lee},
  journal= {arXiv preprint arXiv:2108.09000},
  year   = {2021}
}