EarSpy：通过智能手机听筒的微小振动窃听通话者语音与身份
声音
2022-12-26 v1 密码学与安全
音频与语音处理
摘要
从用户智能手机进行窃听是对用户安全和隐私的已知威胁。现有研究表明，扬声器混响可将语音注入运动传感器读数，从而导致语音窃听。尽管人们认为对产生更小尺度振动的听筒实施更具破坏性的攻击，利用零权限运动传感器进行窃听是不可能的。在这项工作中，我们重新审视这一重要的研究方向。我们探讨了智能手机制造商以额外/大功率扬声器替代小型听筒的最新趋势，并证明了使用运动传感器捕获此类微小语音振动的可行性。我们研究了这些新型听筒对内置运动传感器的影响，并考察了从微小振动中提取私人语音信息的潜力。我们设计的系统 EarSpy 能够成功检测词区域、时域和频域特征，并为每个词区域生成频谱图。我们使用经典机器学习算法和卷积神经网络对提取的数据进行训练和测试。我们发现性别检测的准确率高达 98.66%，说话人检测达 92.6%，数字检测达 56.42%（比随机选择（10%）显著高 5 倍）。我们的结果揭示了利用运动传感器从听筒窃听电话通话的潜在威胁。
引用
@article{arxiv.2212.12151,
title = {EarSpy: Spying Caller Speech and Identity through Tiny Vibrations of Smartphone Ear Speakers},
author = {Ahmed Tanvir Mahdad and Cong Shi and Zhengkun Ye and Tianming Zhao and Yan Wang and Yingying Chen and Nitesh Saxena},
journal= {arXiv preprint arXiv:2212.12151},
year = {2022}
}