本文介绍2019年Song与Ermon提出的基于分数的生成建模框架。该方法不直接学习数据分布,而是学习其分数(对数密度梯度),通过分数匹配训练噪声条件分数网络(NCSN),并用退火朗之万动力学从噪声中采样。多级高斯噪声扰动解决了流形假设和低密度区域问题,在CIFAR-10上取得先进结果,为现代扩散模型奠定基础。
该研究探讨了通过高阶噪声抑制分数匹配方法提升得分网络的训练效率和生成质量。提出了新的理论框架,分析了扩散模型的学习过程,并通过优化策略改善了取样速度和准确性,展示了在处理噪声和有限数据时的有效性。
本研究对因果发现方法进行了广泛的基准测试,发现基于分数匹配的方法表现出令人惊讶的性能,并首次尝试评估因果发现算法的稳定性。该研究为因果发现方法的评估树立新标准,并成为对该领域感兴趣的实践者的可访问入口。
本文介绍了使用分数匹配来估计反向时间SDE的时间不均匀漂移的方法。作者提出了扩散SB(DSB)方法,可以灵活地使用较短的时间间隔,并提供了理论分析和实验结果。DSB不仅提供了生成模型,还作为Sinkhorn算法的连续状态空间类似物。
完成下面两步后,将自动完成登录并继续当前操作。