PatternMonitor：基于视频猜测Android锁屏图案的更高自动化全流程系统
密码学与安全
2021-02-03 v1
摘要
图案锁是在Android平台设备等移动终端上实现身份认证与访问授权的通用技术，但其易受近期研究提出的利用用户绘制图案时泄露信息攻击的威胁。然而，现有对图案锁的攻击对环境敏感且严重依赖人工，制约了这些攻击方法的实用性。为达成更实用的攻击，本文设计了PatternMonitor，一种针对图案锁的、自动化程度高得多的全流程系统，其从包含图案绘制的视频中提取猜测的候选图案：它并非手动裁剪目标视频与设定阈值，而是先采用识别模型定位目标手机与绘制手势的手部关键点，使得即便指尖被遮挡也能识别手势。随后，我们从视频中提取绘制开始与结束的帧。这些预处理帧作为目标跟踪模型的输入以生成轨迹，并通过我们所设计算法进一步转化为可能的候选图案。据我们所知，我们的工作是首个仅依赖手部运动而非精确指尖捕捉来生成候选图案的攻击系统。实验结果表明，我们的工作与先前工作同样准确，在20次尝试内成功率超过90%。
引用
@article{arxiv.2102.01509,
title = {PatternMonitor: a whole pipeline with a much higher level of automation for guessing Android lock pattern based on videos},
author = {Yangde Wang and Weidong Qiu and Yuming Xie and Yan Zha},
journal= {arXiv preprint arXiv:2102.01509},
year = {2021}
}