基于深度感知视角互动与目标纹理恢复的精准人物-物体接触检测
计算机视觉与模式识别
2024-12-17 v2
摘要
人物-物体接触 (HOT) 旨在准确识别人物与物体接触的区域。当前方法常未考虑物体频繁遮挡视线的情况，导致接触区域识别不准。为解决此问题，我们提出了一种称为 PIHOT 的视角互动 HOT 检测器，该检测器利用深度图生成模型提供人物与物体相对于相机的深度信息，从而防止误检。此外，我们采用掩码膨胀和目标恢复技术恢复遮挡区域的纹理细节，改善物体边界，增强对人物与物体互动的感知。我们还引入了空间感知机制，以聚焦于接触点附近的特征。实验结果表明，PIHOT算法在三个 HOT 检测基准数据集上实现了最佳性能。与最新方法 DHOT 相比，我们的方法在 SC-Acc、C-Acc、mIoU 和 wIoU 指标上分别实现了平均提升 13%、27.5%、16% 和 18.5%。
引用
@article{arxiv.2412.09920,
title = {Precision-Enhanced Human-Object Contact Detection via Depth-Aware Perspective Interaction and Object Texture Restoration},
author = {Yuxiao Wang and Wenpeng Neng and Zhenao Wei and Yu Lei and Weiying Xue and Nan Zhuang and Yanwu Xu and Xinyu Jiang and Qi Liu},
journal= {arXiv preprint arXiv:2412.09920},
year = {2024}
}
备注
Accepted by AAAl 2025