理解 Denoising Diffusion Probability Model

Denoising Diffusion Probability Model

diffusion process

扩散过程符合马尔可夫假设

其中

可以发现一个有用的性质

reverse process

由贝叶斯法则，得

令

因为

所以

建立模型,

parameter estimate

maximum likelihood

下面直接将对数似然写成ELBO + KL散度的形式

因为

所以

为了简化,我们将方差设为固定值,上式中

simple objective

conclusion