利用牙齿敲击实现智能眼镜的非语言免提控制
人机交互
2024-08-22 v1
摘要
智能眼镜正成为一种新兴的流行计算平台，有望彻底改变下一代人机交互。智能眼镜的普及催生了对隐蔽且免提控制方法的迫切需求。语音命令或触觉手势等传统输入方法可能具有侵入性且不够隐蔽。此外，基于语音的控制在嘈杂的声学环境中可能效果不佳。我们提出了一种新颖、隐蔽、非语言且非触觉的方法，通过牙齿敲击在皮肤上产生的细微振动来控制智能眼镜。我们证明，这些振动可以被嵌入眼镜中的加速度计以低计算开销的预测模型感知。我们提出的方法名为STEALTHsense，利用基于时间广播的神经网络架构，每个推理单元仅需88K可训练参数和7.14 MMAC。我们将STEALTHsense与最先进的深度学习方法和传统的低计算开销机器学习方法进行了基准比较。我们进行了一项涉及21名参与者的研究，收集了两种不同牙齿敲击模式以及许多非模式的代表性样本，以稳健地训练STEALTHsense，实现了0.93的平均跨人准确率。现场测试证实了其在嘈杂环境下的有效性，表明STEALTHsense在实际应用中具有潜力，为智能眼镜交互提供了一种有前景的方案。
引用
@article{arxiv.2408.11346,
title = {Non-verbal Hands-free Control for Smart Glasses using Teeth Clicks},
author = {Payal Mohapatra and Ali Aroudi and Anurag Kumar and Morteza Khaleghimeybodi},
journal= {arXiv preprint arXiv:2408.11346},
year = {2024}
}