内容提要
浙大00后陈天润创办的魔芯科技发布MoWorld 2.0通用4D世界模型,将重力、弹力、流体等十余种物理要素融入同一模型,提升物理规律建模能力,可输出可编辑的3D/4D高斯资产,用于游戏、影视和机器人仿真。团队与华为合作优化昇腾NPU,实时推理速度从50 FPS提升至70 FPS,成本最低为同规模GPU方案的30%,并已落地手机端应用。
延伸解读
物理要素融合:从“预测画面”到“推演规律”
MoWorld 2.0将重力、弹力、流体等十余种物理要素融入同一模型,并学习其相互作用。这意味着模型不再仅依赖图像或文字指令预测下一帧,而是让材质、外力与物体间作用共同决定场景变化。例如书签掉落时,模型能模拟接触、受力与弹起过程。这种思路更接近物理仿真,为机器人训练等下游任务提供了可解释的推演基础。
可编辑高斯资产:生成内容从“一次性视频”变为“可复用素材”
模型输出可保存为3D/4D高斯资产,记录空间结构与随时间变化的信息,支持后续编辑、渲染和反复调用。这改变了生成内容的使用方式:影视团队可换机位、改天气做分镜预演;机器人团队能在同一环境中调整障碍物和天气,反复测试智能体。资产化让生成结果进入游戏引擎、影视系统和仿真平台,提升了内容的复用价值。
芯模协同降本:国产算力贯穿训练到端侧
团队与华为合作,将场景解码、主干生成等任务拆分到多张昇腾NPU并行处理,并优化稀疏注意力和混合精度量化,使实时推理从50 FPS提升至70 FPS,成本最低为同规模GPU方案的30%。手机端应用“摸小宠”展示了云端生成资产、端侧模型推理、手机渲染交互的完整链路。这表明国产算力已能支撑世界模型从训练到部署的全流程。
从3D打印机到世界模型:转型路径与商业化验证
魔芯科技最初做3D打印机,2024年底发现网络能生成空间后转向世界模型,但保留打印机业务,并通过影视、文旅项目获得现金流。这种消费电子工程经验被团队视为优势之一,使其在研发、成本、质量和交付上更务实。今年连续完成5轮融资、估值近百亿,并与三个国家人工智能应用中试基地合作,显示其技术正进入具身智能、文旅等实际场景验证阶段。
Q&A
MoWorld 2.0是什么?它和上一代相比主要提升了什么?
MoWorld 2.0是魔芯科技发布的通用4D世界模型,在前代空间生成与实时交互能力基础上,重点加强了对物理规律的建模能力,将重力、弹力、浮力、光照、柔体、流体、刚体、形塑体、热力等十余种物理要素融入同一个模型,能更准确地模拟物体运动、碰撞和环境变化。
MoWorld 2.0如何实现多种物理要素的融合建模?
训练时模型既学习重力、弹力、柔体、流体等物理要素各自的作用,也学习它们叠加后如何影响物体运动和形变。具体实现上,团队构建了物理高斯渲染器以支持不同物理要素的交互与渲染,并采用多专家预测对物理、像素和高斯三类信息进行预测。
MoWorld 2.0生成的3D/4D高斯资产有什么用途?
生成的场景可输出为3D/4D高斯资产,保存后能继续编辑、渲染和反复调用。3D资产记录空间信息,4D资产进一步记录随时间变化的信息。这些资产可进入游戏引擎、影视制作系统及机器人仿真训练平台,用于分镜预演、内容制作、机器人及智驾团队的虚拟环境测试等。
MoWorld 2.0在华为昇腾NPU上的推理速度提升了多少?成本如何?
实时视频推理速度从上一代最高约50 FPS提升至约70 FPS,提升约40%。推理成本最低为同规模GPU方案的30%。提速关键是将不同计算任务拆分到多张NPU并行处理,并优化多卡协同调度、稀疏注意力机制,采用混合精度量化和生成算子融合等手段。
MoWorld 2.0在手机端有哪些落地应用?
今年10月华为新款手机发布会上亮相的“摸小宠”就是MoWorld 2.0的终端应用:用户上传几张宠物照片即可生成宠物的4D数字分身,从不同角度观察并互动。该体验由云端和手机协同完成,高质量4D资产在云端生成,约6亿参数的端侧模型在昇腾平台训练后部署到搭载麒麟芯片的手机上进行推理,手机端负责渲染和交互。
魔芯科技是一家怎样的公司?它是如何从3D打印机转向世界模型的?
魔芯科技成立于2021年,创始人陈天润当时是浙江大学大三学生,最早做3D打印机。2024年底,团队发现测试中的网络不仅能生成物体还能生成空间,且随数据量增加空间重建精度和一致性持续提高,随后将建模框架迁移到世界模型项目,公司重心转向空间智能。转型后保留3D打印机业务,并通过影视、文旅项目验证模型能力并获得现金流。