SynthoGestures：一种用于驾驶场景合成动态手势生成的新框架
计算机视觉与模式识别
2024-08-05 v2 人工智能
人机交互
摘要
为汽车领域动态人机界面创建多样且全面的手势数据集可能具有挑战性且耗时。为克服这一挑战，我们提出使用由虚拟 3D 模型生成的合成手势数据集。我们的框架利用 Unreal Engine 合成逼真的手势，提供定制选项并降低过拟合风险。我们生成了多种变体，包括手势速度、执行方式和手形，以提升泛化能力。此外，我们模拟了不同的相机位置和类型，如 RGB、红外和深度相机，而无需额外花费时间和成本来获取这些相机。实验结果表明，我们提出的框架 SynthoGestures（https://github.com/amrgomaaelhady/SynthoGestures）提高了手势识别准确率，并可替代或增强真实手势数据集。通过节省数据集创建的时间和精力，我们的工具加速了面向汽车应用的手势识别系统的开发。
引用
@article{arxiv.2309.04421,
title = {SynthoGestures: A Novel Framework for Synthetic Dynamic Hand Gesture Generation for Driving Scenarios},
author = {Amr Gomaa and Robin Zitt and Guillermo Reyes and Antonio Krüger},
journal= {arXiv preprint arXiv:2309.04421},
year = {2024}
}
备注
Accepted at IEEE IV'24. Shorter versions were accepted as AutomotiveUI2023 Work in Progress and UIST2023 Poster Papers