PointTalk: 基于音频驱动的动态唇部点云用于3D高斯基础的对话头合成

💡 原文英文,约100词,阅读约需1分钟。
📝

内容提要

本文提出了一种新颖的3D高斯方法PointTalk,旨在解决数字人类领域的语音驱动对话头合成问题,显著提高合成的高保真度和音频与唇部的同步性。

🎯

关键要点

  • 提出了一种新颖的3D高斯方法PointTalk。
  • 解决了数字人类领域内任意语音音频驱动的对话头合成问题。
  • 通过静态3D高斯场与音频同步变形来提升合成效果。
  • 引入音频驱动的动态唇部点云。
  • 显著提升了对话头合成的高保真度和音频与唇部的同步性。
➡️

继续阅读