GigaHands: 一个大规模双手手部活动标注数据集
计算机视觉与模式识别
2025-04-10 v3
摘要
理解人类的双手手部活动是人工智能和机器人学中的一个关键问题。我们无法构建双手活动的大模型，因为现有数据集缺乏规模、对多样化手部活动的覆盖以及详细的标注。我们引入了GigaHands，这是一个大规模标注数据集，捕捉了来自56名受试者和417个物体的34小时双手手部活动，总计包含1.4万个运动片段，这些片段源自1.83亿帧图像并配有8.4万条文本标注。我们的无标记捕捉设置和数据采集协议能够实现全自动的3D手部和物体估计，同时最大限度地减少了文本标注所需的工作量。GigaHands的规模和多样性支持广泛的应用，包括文本驱动的动作合成、手部运动描述以及动态辐射场重建。我们的网站可在 https://ivl.cs.brown.edu/research/gigahands.html 访问。
引用
@article{arxiv.2412.04244,
title = {GigaHands: A Massive Annotated Dataset of Bimanual Hand Activities},
author = {Rao Fu and Dingxi Zhang and Alex Jiang and Wanjia Fu and Austin Funk and Daniel Ritchie and Srinath Sridhar},
journal= {arXiv preprint arXiv:2412.04244},
year = {2025}
}
备注
CVPR 2025 Highlight