字节最新技术一键「迁移」表情神态,人人都是演技派

字节最新技术一键「迁移」表情神态,人人都是演技派

💡 原文中文,约1600字,阅读约需4分钟。
📝

内容提要

字节跳动与清华大学联合推出的X-Portrait 2是一款生成式人像转移模型,用户只需提供静态肖像和表演视频即可实现表情迁移。该技术在自然流畅性和细腻度上较前代产品有显著提升,适用于动画和虚拟代理等领域,简化了后期特效制作。

🎯

关键要点

  • 字节跳动与清华大学联合推出X-Portrait 2,属于生成式人像转移模型。
  • 用户只需提供静态肖像和表演视频即可实现表情迁移。
  • X-Portrait 2在自然流畅性和细腻度上较前代产品有显著提升。
  • 该技术适用于动画、虚拟代理等领域,简化后期特效制作。
  • X-Portrait 2能够实现跨风格和跨领域的表情转移,适应性强。
  • 新模型采用更先进的表情编码器,能精确捕捉微妙表情。
  • 实现外观和动作的有效分离,保留原始图像的外观特征。
  • 引入生成式扩散模型,处理不同视角下的表情变化。
  • 与同类竞品Runway的Act-One相比,X-Portrait 2在表情复刻上更精准细腻。
  • X-Portrait 2的推出推动了用生成式AI代替动捕的概念,向商用更进一步。
➡️

继续阅读