MicroCam：利用智能手机显微镜相机实现基于上下文的接触表面感知
人机交互
2024-07-23 v1
摘要
本研究的主要焦点是移动电话与其周围表面之间的隐蔽而细微的日常接触互动。这些互动预计将促进移动上下文感知，包括如分发药物更新、智能切换模式（例如静音模式）或发出命令（例如 deactivating an alarm）等方面。我们引入了 MicroCam，这是一种基于接触的感知系统，利用智能手机 IMU 数据检测电话放置的常规状态，并利用内置显微镜相机捕获表面细节的复杂信息。具体而言，收集了一个自然数据集，以获取现场的真实表面纹理，用于训练和测试。此外，我们基于持续学习优化了算法的深度神经网络组件，以准确地区分对象类别（例如桌子）和材料组成（例如木头）。实验结果突出了所提出方法的卓越准确性、稳健性和泛化能力。最后，我们对原型进行了全面的讨论，涵盖了系统性能、潜在应用和情景等主题。
引用
@article{arxiv.2407.15722,
title = {MicroCam: Leveraging Smartphone Microscope Camera for Context-Aware Contact Surface Sensing},
author = {Yongquan Hu and Hui-Shyong Yeo and Mingyue Yuan and Haoran Fan and Don Samitha Elvitigala and Wen Hu and Aaron Quigley},
journal= {arXiv preprint arXiv:2407.15722},
year = {2024}
}
备注
28 pages