量子位
·
我用豆包，生成了AI版《红楼梦》MV
💡
原文中文，约3900字，阅读约需10分钟。
📝
内容提要
字节推出的豆包AI模型利用PixelDance和Seaweed技术制作了AI版《红楼梦》MV。通过豆包查询生成图片，再用PixelDance生成视频，海绵音乐生成背景音乐，展示了豆包在视频生成中的强大能力。字节还发布了音乐和同声传译模型，扩展了豆包的应用范围。
🎯
关键要点
- 字节推出的豆包AI模型利用PixelDance和Seaweed技术制作了AI版《红楼梦》MV。
- 豆包通过查询生成图片，再用PixelDance生成视频，海绵音乐生成背景音乐。
- 视频生成的步骤包括查询经典片段、生成图片、生成视频片段和生成背景音乐。
- 豆包PixelDance模型具有精准的语义理解和多动作多主体交互能力。
- 模型能够处理复杂动态和运镜，生成的场景逼真。
- 一致性和多镜头生成是豆包PixelDance模型的优势，避免了画面不一致的问题。
- 豆包PixelDance模型支持多种风格和比例，具有较强的兼容性。
- 字节还发布了豆包音乐模型和同声传译模型，扩展了豆包的应用范围。
- 豆包大模型的日均tokens使用量超过1.3万亿，显示出其广泛的应用。
- 字节的模型发展策略是先To C，再To B，降低成本以促进创新。
➡️
