Google的新视频生成AI模型Lumiere使用名为STUNet的扩散模型来创建视频。它通过近似帧内物体的运动来生成更多无缝流动的帧。与稳定视频扩散相比,Lumiere生成了80帧。它展示了Google开发与Runway和Pika相媲美的AI视频平台的能力。Lumiere还允许图像到视频生成、风格化生成、电影画面和修复。
Google Lumiere通过时空U-Net架构改变了AI视频游戏,解决了视频合成中的关键挑战。该模型可以生成逼真、多样和连贯的运动,用于视频编辑、图像到视频转换、风格化生成和文本转视频等任务。
Lumiere是一种文本到视频扩散模型,通过引入空时U-Net架构,实现全局时间一致性。该设计适用于内容创作任务和视频编辑应用。
完成下面两步后,将自动完成登录并继续当前操作。