面向视障人士的触觉设备物体识别系统
计算机视觉与模式识别
2023-07-06 v1
摘要
视障人士在与环境交互时面临诸多挑战。我们的目标是开发一种促进视障人士与其周围环境通信的设备。该设备将把视觉信息转换为听觉反馈，使用户能以契合其感官需求的方式理解环境。最初，基于精度与成本考量（包括时间与功耗），从现有机器学习模型中选取物体检测模型。随后将该选定模型部署于树莓派（Raspberry Pi），其连接至专门设计的触觉设备。当设备在特定位置被触摸时，它会提供音频信号，向视障人士传达该对应位置场景中存在的物体身份。已开展的测试证明了该设备在场景理解方面的有效性，涵盖静态或动态物体，以及电视、电脑和手机等屏幕内容。
引用
@article{arxiv.2307.02211,
title = {Object Recognition System on a Tactile Device for Visually Impaired},
author = {Souayah Abdelkader and Mokretar Kraroubi Abderrahmene and Slimane Larabi},
journal= {arXiv preprint arXiv:2307.02211},
year = {2023}
}