StableDiffusion笔记
💡
原文中文，约1800字，阅读约需5分钟。
📝
内容提要
Stable Diffusion是一种图像生成方法，由Stability AI和Runway基于LDM1提出。该方法通过随机种子生成噪声，利用文本编码器将输入提示转换为向量，并通过Unet网络处理，最终生成高分辨率图像。Unet中加入了交叉注意力机制，提升了生成效果。
🎯
关键要点
- Stable Diffusion是一种图像生成方法，由Stability AI和Runway基于LDM1提出。
- 该方法通过随机种子生成噪声，并利用文本编码器将输入提示转换为向量。
- 生成的随机噪声和文本向量被送入Unet网络进行处理。
- Unet中加入了交叉注意力机制，以提升生成效果。
- 通过反向扩散过程，Unet网络进行多轮预测，逐步生成高分辨率图像。
❓
延伸问答
Stable Diffusion是什么？
Stable Diffusion是一种图像生成方法，由Stability AI和Runway基于LDM1提出。
Stable Diffusion是如何生成图像的？
该方法通过随机种子生成噪声，利用文本编码器将输入提示转换为向量，然后通过Unet网络处理生成高分辨率图像。
Unet网络在Stable Diffusion中有什么作用？
Unet网络处理随机噪声和文本向量，并通过反向扩散过程进行多轮预测，逐步生成高分辨率图像。
Stable Diffusion中使用了什么技术来提升生成效果？
Unet中加入了交叉注意力机制，以提升生成效果。
Stable Diffusion的输入数据是什么？
输入数据包括随机种子生成的噪声和通过文本编码器转换的文本向量。
Stable Diffusion的反向扩散过程是怎样的？
在反向扩散过程中，输入的文本向量和噪声图片经过多轮Unet网络，每轮预测一个噪声，逐步生成清晰的图像。
➡️
