LM2D: 歌词与音乐驱动的舞蹈合成
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
通过多模态扩散模型和一致性蒸馏构建了新颖的概率架构LM2D,用于创建与歌词和音乐相匹配的逼真且多样化的舞蹈。经过客观度量和人类评估,该模型能够产生与歌词和音乐匹配的逼真且多样化的舞蹈。
🎯
关键要点
- 通过多模态扩散模型和一致性蒸馏构建了新颖的概率架构LM2D。
- 该模型用于创建与歌词和音乐相匹配的逼真且多样化的舞蹈。
- 引入了涵盖音乐和歌词的第一个3D舞蹈动作数据集。
- 模型结果经过客观度量和人类评估,表明其生成的舞蹈与歌词和音乐匹配。
➡️