SignAvatars:大规模 3D 手语整体运动数据集与基准

💡 原文中文,约200字,阅读约需1分钟。
📝

内容提要

该研究提出了一种新型混合动作基元架构和联合训练方法,实现了在小语料库中从语音到手语的翻译。相较于从原始手语表现形式到手语的翻译,完整的从口语到手语的翻译流水线表现更好。

🎯

关键要点

  • 提出了一种新型混合动作基元架构用于手语制作。
  • 采用深度学习方法进行语音到手语的翻译。
  • 将翻译过程拆分为独立子任务并进行联合训练。
  • 实现了在较小语料库中从语音到手语的翻译。
  • 展示了完整的从口语到手语的翻译流水线。
  • 相较于从原始手语表现形式到手语的翻译,性能更好。
➡️

继续阅读