面向聋人与听力障碍者的移动端声音识别

人类对周围事件的感知强烈依赖于听觉线索。因此，声音隔绝会严重影响情境感知。我们在辅助计算领域提出了一项探索性研究，通过需求调研并给出在开发环境声音识别系统过程中所发现问题的解决方案，该系统旨在协助聋人与听力障碍者感知声音。为利用智能手机普遍存在的计算能力，我们提出了一种在设备本地完成全部处理的系统，从音频特征提取到识别及结果的可视化呈现均在端侧进行。我们的应用还向用户展示分类的置信度水平。由聋人用户参与的系统测试提供了重要且令人鼓舞的反馈。