量子位
·
美国视频生成老炮儿，入局世界模型
💡
原文中文，约2500字，阅读约需6分钟。
📝
内容提要
Runway发布了首个通用世界模型GWM-1及其变体，包括GWM Worlds、GWM Avatars和GWM Robotics，基于Gen-4.5构建。GWM Worlds支持实时环境模拟，GWM Avatars用于人类对话模拟，GWM Robotics提升机器人操作的训练效率和安全性。同时，Gen-4.5还增强了音频生成与编辑功能。
🎯
关键要点
- Runway发布了首个通用世界模型GWM-1及其变体，包括GWM Worlds、GWM Avatars和GWM Robotics。
- GWM Worlds支持实时环境模拟，用户可以在生成的沉浸式空间中自由移动。
- GWM Avatars能够模拟人类对话，渲染逼真的面部表情和动作，适用于客户服务和高压场景练习。
- GWM Robotics是学习型模拟器，通过生成合成数据提升机器人训练效率和安全性。
- Gen-4.5进行了升级，新增音频生成与编辑功能，支持多镜头编辑和音频内容扩充。
❓
延伸问答
GWM-1是什么？
GWM-1是Runway发布的首个通用世界模型，基于Gen-4.5构建，支持实时交互控制和逐帧预测生成。
GWM Worlds的主要功能是什么？
GWM Worlds支持实时环境模拟，用户可以在生成的沉浸式空间中自由移动，并通过文本提示改变环境的物理规则。
GWM Avatars如何应用于客户服务？
GWM Avatars能够模拟人类对话，生成具有人类表情的数字人，帮助解决用户实际需求，提升客户服务体验。
GWM Robotics的优势是什么？
GWM Robotics通过生成合成数据提升机器人训练效率和安全性，避免昂贵的真实数据收集，并能快速测试策略模型的可行性。
Gen-4.5的升级内容有哪些？
Gen-4.5进行了升级，新增音频生成与编辑功能，支持多镜头编辑和音频内容扩充。
GWM Worlds如何支持VR体验？
GWM Worlds通过实时生成虚拟环境，为VR沉浸式体验提供支持，允许用户在动态生成的空间中探索。
➡️
