Stable Diffusion 系统架构图
• 每张图片都满足一定的规律分布，利用文本中包含的分布信息作为指导，将纯噪声
的图片逐步去噪，生成一张跟文本信息匹配的图片
• Stable Diffusion 是一个组合系统，包含了多个模型子模块，组成扩散Pipeline
1. 寻找分布的方法
• 前向扩散过程（Forward Diffusion Process）
向图片中逐渐引入噪声来破坏图像，直到图像变
成完全随机的噪声
• 后向扩散过程（Backward Diffusion Process）
使用一系列马尔可夫链逐步去除预测噪声，从高
斯噪声中生成图片
• 扩散过程由 Unet 网络和 采样器（scheduler 算
法）共同完成，在 Unet 网络中一步步执行生成
过程， 其中采样器控制去噪方法和强度
你可能感兴趣
