SMooDi: 风格化运动扩散模型

我们提出一种新颖的风格化运动扩散模型，称为SMooDi，用于生成由内容文本驱动且风格化的运动。与现有方法仅生成各种内容运动或从一个序列传递风格到另一个序列不同，SMooDi能够快速生成广泛内容和多样化风格之间的运动。为此，我们针对风格化定制了一个预训练的文本到运动模型。具体而言，我们提出了风格引导，以确保生成的运动与参考风格紧密匹配，同时引入轻量级风格适配器，引导运动趋向所需风格，同时确保真实性。跨各种应用的实验表明，我们提出的框架在风格化运动生成方面优于现有方法。