使用协作控制联合生成多视角一致的PBR纹理
原文中文,约300字,阅读约需1分钟。发表于: 。本研究解决了图像扩散模型中多视角一致性的问题,尤其是在文本到纹理的应用场景中。通过协作控制工作流程,本文提出了一种新颖的模型,能够直接输出完整的PBR图像概率分布,从而有效提高多视角一致性。实验结果表明,该方法显著改善了纹理生成的对齐效果,具有广泛的实际应用价值。
该研究提出了一种直接建模PBR图像分布的方法,解决了RGB生成中的光度不准确和从RGB提取PBR时的模糊性问题。通过冻结RGB模型并通过跨网络通信链接新训练的PBR模型,克服了数据不足和高维输出的挑战,避免了微调过程中的遗忘问题,并兼容预训练技术。实验验证了该方法的有效性和对数据稀疏性的鲁棒性。