生成模型的最优预算拒绝采样
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
本文提出了一种新的推理策略 - Reparameterized Variational Rejection Sampling (RVRS),通过引入低方差的重新参数化梯度估计器,将 VRS 变为适用于具有连续潜在变量的模型。RVRS 在计算成本和推理准确性之间提供了一个折衷方案,特别适用于具有局部潜在变量的黑盒推理。
🎯
关键要点
- 传统的变分推理方法依赖于变分分布的参数族。
- 变分分布的选择对后验概率近似的准确性起着关键作用。
- 本文提出了一种新的推理策略 - Reparameterized Variational Rejection Sampling (RVRS)。
- RVRS 通过引入低方差的重新参数化梯度估计器,适用于具有连续潜在变量的模型。
- RVRS 在计算成本和推理准确性之间提供了一个折衷方案。
- RVRS 特别适用于具有局部潜在变量的黑盒推理。
➡️