一种新型人脸追踪嘴部控制器及其在生物声学模型交互中的应用
人机交互
2020-10-08 v1 计算机视觉与模式识别
声音
音频与语音处理
摘要
我们描述了一种简单、计算量轻、实时的系统，用于追踪下面部并从视频序列中提取张口形状信息。该系统可通过嘴部动作对音频合成模块进行无束缚控制。我们报告了利用该嘴部控制器与鸟类鸣管发声物理模型进行交互的正在进行的工作。
引用
@article{arxiv.2010.03265,
title = {A Novel Face-tracking Mouth Controller and its Application to Interacting with Bioacoustic Models},
author = {Gamhewage C. de Silva and Tamara Smyth and Michael J. Lyons},
journal= {arXiv preprint arXiv:2010.03265},
year = {2020}
}
备注
Proceedings of the International Conference on New Interfaces for Musical Expression, 2004 (NIME-04)