AMD:解剖运动扩散与可解释运动分解与融合

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

本文介绍了优先级中心的M2DM模型,利用基于Transformer的VQ-VAE得出离散的动作表示。该模型通过自注意机制和正则化项抵消代码坍塌,并采用噪声调度方式确定动作标记的重要性。实验证实该模型在保真度和多样性方面超过现有技术,尤其对于复杂的文本描述。

🎯

关键要点

  • 本文介绍了一种优先级中心的运动分散扩散模型(M2DM)。
  • 该模型利用基于Transformer的VQ-VAE得出简洁的、离散的动作表示。
  • 模型通过全局自注意机制和正则化项来抵消代码坍塌。
  • 提出了一种创新的噪声调度方式,根据动作标记的重要性确定其在运动序列中的地位。
  • 该方法在逆扩散过程中保留了最显著的动作,产生更丰富多样的语义动作。
  • 在HumanML3D和KIT-ML数据集上的实验表明,该模型在保真度和多样性方面超过了现有技术,尤其适用于复杂的文本描述。
➡️

继续阅读