中文

Music2Dance:用于音乐驱动舞蹈生成的 DanceNet

计算机视觉与模式识别 2020-03-12 v2 声音 音频与语音处理

摘要

从音乐合成人体动作,即音乐到舞蹈,具有吸引力并在近年来引起大量研究兴趣。这是具有挑战性的,不仅因为舞蹈需要真实而复杂的人体动作,更重要的是,合成的动作应与音乐的风格、节奏和旋律一致。在本文中,我们提出了一种新颖的自回归生成模型 DanceNet,以音乐的风格、节奏和旋律作为控制信号,生成具有高真实性和多样性的三维舞蹈动作。为了提升我们所提出模型的性能,我们由专业舞者捕获了若干同步的音乐-舞蹈对,并构建了一个高质量的音乐-舞蹈对数据集。实验已证明所提方法能够达到最先进(state-of-the-art)的结果。

关键词

引用

@article{arxiv.2002.03761,
  title  = {Music2Dance: DanceNet for Music-driven Dance Generation},
  author = {Wenlin Zhuang and Congyi Wang and Siyu Xia and Jinxiang Chai and Yangang Wang},
  journal= {arXiv preprint arXiv:2002.03761},
  year   = {2020}
}

备注

Our results are shown at https://youtu.be/bTHSrfEHcG8