量子位
·
AI版《黑客帝国》：无限生成逼真视频，3A画质，还能实时交互
💡
原文中文，约2200字，阅读约需6分钟。
📝
内容提要
AI版《黑客帝国》由华人团队开发，能够生成720p高保真视频并实现实时交互，支持零样本泛化，结合游戏与现实场景数据，具备精确控制和流畅生成能力。
🎯
关键要点
- AI版《黑客帝国》是首个AI基础世界模拟器，能够生成720p高保真视频并实现实时交互。
- 该项目由全华人团队开发，团队成员来自阿里巴巴、香港大学、滑铁卢大学和加拿大AI研究机构。
- The Matrix支持零样本泛化，能够在没有训练数据的情况下理解和预测不同环境中的物体行为。
- 训练数据包括3A游戏的监督数据和现实世界场景的无监督视频。
- The Matrix的核心技术包括交互模块、移窗去噪过程模型和流一致性模型，确保实时生成和精确控制。
- 项目负责人是滑铁卢大学的助理教授Hongyang Zhang和来自阿里巴巴的Ruili Feng。
❓
延伸问答
AI版《黑客帝国》是什么？
AI版《黑客帝国》是首个AI基础世界模拟器，能够生成720p高保真视频并实现实时交互。
这个项目是由哪个团队开发的？
该项目由全华人团队开发，成员来自阿里巴巴、香港大学、滑铁卢大学和加拿大AI研究机构。
AI版《黑客帝国》如何实现零样本泛化？
它能够在没有训练数据的情况下理解和预测不同环境中的物体行为，主要依赖于3A游戏的监督数据和现实世界的无监督视频。
The Matrix的核心技术有哪些？
核心技术包括交互模块、移窗去噪过程模型和流一致性模型，确保实时生成和精确控制。
AI版《黑客帝国》支持哪些交互方式？
用户可以通过键盘输入（如W、A、S、D键）来实时控制视频生成，达到每秒16帧的精确控制。
这个项目的实时生成速度如何？
The Matrix集成了流一致性模型，使得推理速度加快10-20倍，最终实现8-16 FPS的实时生成速度。
➡️
