DDPM

DDPM 实现噪声到图片步骤[1]

DDPM实现从噪声生成图像的步骤就清晰了:

  1. 前向过程:将原图逐步添加噪声, 共1000步

  2. 反向过程:利用神经网络学习加噪图像到噪声的变换,使得模型可以去噪

  3. 推理使用:随机采样,得到高斯噪声,然后逐步去噪,经过1000步去噪,得到清晰图像。

    1.jpg

DDPM 模型结构[1]

ddpm-struct.png

DDPM——训练[4]

DDPM——推理[4]

Stable Diffusion

Diffusion Model 拓展 —— Stable Diffusion [1]

Stable Diffusion 背后的技术是LDM(latent diffusion model)