VoCopilot：语音激活的日常交互追踪
声音
2023-12-19 v1 人工智能
音频与语音处理
摘要
语音在我们的生活中扮演着重要角色，它促进沟通、传达情感并指示健康状况。因此，追踪语音交互可以为我们生活的许多方面提供有价值的见解。本文介绍了我们正在进行的、旨在设计一个名为VoCopilot的新型语音追踪系统的工作。VoCopilot是一个端到端系统，其核心是结合了先进机器学习模型的节能声学硬件和固件。因此，VoCopilot能够持续追踪对话、进行录音、转录，并从中提取有用的见解。通过利用大型语言模型，VoCopilot确保用户无需学习复杂的机器学习技术即可从记录的交互中提取有用的见解。为了保护最终用户的隐私，VoCopilot采用了一种新颖的唤醒机制，仅记录最终用户的对话。此外，管线的其余部分均可在商用计算机（Mac Mini M2）上运行。在这项工作中，我们展示了VoCopilot在真实世界环境中针对两个用例的有效性。
引用
@article{arxiv.2312.10265,
title = {VoCopilot: Voice-Activated Tracking of Everyday Interactions},
author = {Sheen An Goh and Manoj Gulati and Ambuj Varshney},
journal= {arXiv preprint arXiv:2312.10265},
year = {2023}
}