扩散模型实战（八）：微调扩散模型

文章预览

推荐阅读列表： 扩散模型实战（一）：基本原理介绍 扩散模型实战（二）：扩散模型的发展 扩散模型实战（三）：扩散模型的应用 扩散模型实战（四）：从零构建扩散模型 扩散模型实战（五）：采样过程 扩散模型实战（六）：Diffusers DDPM初探 扩散模型实战（七）：Diffusers蝴蝶图像生成实战        微调在LLM中并不是新鲜的概念，从头开始训练一个扩散模型需要很长的时间，特别是使用高分辨率图像训练。那么其实我们可以在已经训练好的”去噪“扩散模型基础上使用微调数据集进行二次微调训练。        本文将介绍基于蝴蝶数据集上微调人脸生成的扩散模型： 一、环境准备 1.1 安装相关库 !pip install -qq diffusers datasets accelerate wandb open -clip-torch 1.2 登录 Huggingface  Hub 如果需要开源微调好的模型到Huggingface Hub上，那么需要使用如下代码登录， ………………………………