Transhuman Ansambl - 超越语言的语音
人机交互
2024-05-07 v1 声音
音频与语音处理
摘要
本文介绍了Transhuman Ansambl的设计与开发,这是一种新颖的交互式歌唱语音界面,能够感知环境并利用人声对语音输入做出响应。该界面专为人类表演者的现场表演以及作为独立声音装置而设计,由十六个定制虚拟歌手围成一圈组成。在现场表演时,虚拟歌手聆听人类表演者,并通过读取音高、语调和音量线索来响应其歌唱。在独立声音装置模式下,歌手使用超声波距离传感器感知观众的存在。作为第一作者基于实践的博士研究和现场表演艺术实践的一部分,本工作利用歌唱语音探索人机交互中超越语言的语音交互,以及创新的现场表演方式。技术如何支持通过语音产生的亲密感?用响应式虚拟歌手包围观众的行为是否挑战了表演者-听众的传统角色?为回答这些问题,我们借鉴了第一作者使用该系统的经验,以及将语音视为独立于语言的声音媒介、能够建立身体间互惠联系的跨学科语音研究领域。
引用
@article{arxiv.2405.03134,
title = {Transhuman Ansambl - Voice Beyond Language},
author = {Lucija Ivsic and Jon McCormack and Vince Dziekan},
journal= {arXiv preprint arXiv:2405.03134},
year = {2024}
}