DreamCraft3D:基于推断扩散先验的分层三维生成
原文中文,约400字,阅读约需1分钟。发表于: 。DreamCraft3D 是一个层次化的 3D 内容生成方法,通过使用 2D 参考图像来引导几何雕刻和纹理增强的阶段,解决了现有方法遇到的一致性问题,使用得分蒸馏采样和视角相关的扩散模型来生成一致的几何体,并通过训练个性化的扩散模型来提高纹理质量,最终生成具有逼真渲染效果的连贯的 3D 对象。
MVDream是一个多视图扩散模型,可以生成几何一致的多视图图像。该模型利用预训练的图像扩散模型和从3D资源渲染的多视图数据集,实现2D扩散的概括性和3D数据的一致性。该模型可以用作3D生成的多视图先验,并通过Score Distillation Sampling解决现有2D-lifting方法中的3D一致性问题。最后,该模型可以在少量样本设置下进行微调,用于个性化的3D生成。