快手可灵团队最新开源项目火了:大叔实时变身少女,GitHub狂揽7.5K星

💡 原文中文,约1700字,阅读约需4分钟。
📝

内容提要

快手可灵团队开源项目LivePortrait火了,能生成动态视频,引来HuggingFace首席战略官体验。LivePortrait可以让肖像眨眼、微笑或转头,还能将表情复制到其他人身上。它不依赖明确可见的标记或特征点,通过学习数据集中的模式来推断关键点位置。在RTX 4090 GPU上,每帧生成速度为12.8毫秒。可灵AI即将全球开放。

🎯

关键要点

  • 快手可灵团队的开源项目LivePortrait迅速走红,GitHub上获得7.5K星标。
  • LivePortrait能够生成动态视频,支持肖像眨眼、微笑和转头等动作。
  • 该技术可以将表情复制到其他人身上,支持多种风格和尺寸。
  • LivePortrait不依赖于明确可见的标记,而是通过学习数据集中的模式推断关键点位置。
  • 模型训练分为两个阶段,第一阶段改进了隐式点框架,第二阶段增强了面部表情处理的精确度。
  • 在RTX 4090 GPU上,LivePortrait的生成速度为每帧12.8毫秒,效率高于现有的扩散模型方法。
  • 可灵AI即将在全球范围内推出其服务。
➡️

继续阅读