Aprende Difusión Estable paso a paso

0. Antecedentes

Después de ver muchos videos de Stable Diffusion en Internet, así como algunos materiales del sitio web, decidí organizar un material de aprendizaje paso a paso para Stable Diffusion.

1. Instalación

Consulte la implementación local de Windows 11 de la interfaz de usuario web Stable Diffusion o Windows 11 para crear un entorno de aprendizaje de IA basado en wsl-ubuntu desde cero e implementar una variedad de ChatGPT privado para la implementación.

2. Sinización

Visite la pestaña Extensiones => Disponible, elimine la verificación de localización y haga clic en "Cargar desde",

Ingrese en Buscar zh, luego haga clic en Instalar para instalar "localización de localización zh_CN",

Haga clic en la pestaña Instalado, luego haga clic en "Aplicar y reiniciar la interfaz de usuario" para reiniciar la interfaz de usuario.

Haga clic en Configuración => Interfaz de usuario, configure Localización en zh_CN, luego haga clic en "Aplicar configuración", luego haga clic en "Recargar IU",

De esta forma, el entorno de Stable Diffusion se convierte en chino.

3. Instale el complemento sd-webui-controlnet

Haga clic en Extensiones => Instalar desde URL, ingrese lo siguiente y haga clic en Instalar,

• URL extendida del repositorio de git:https://github.com/Mikubill/sd-webui-controlnet

Luego haga clic en Instalado, haga clic en Aplicar y reinicie la interfaz de usuario,

Visite https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main para descargar el archivo del modelo, solo necesita descargar el archivo con la extensión .pthde , un total de 14 archivos, aproximadamente 20 GB.

Luego guarde el archivo descargado en stable-diffusion-webui\extensions\sd-webui-controlnet\modelsel directorio ,

configuración adicional,

4. Instale el complemento sd-webui-segment-anything

Haga clic en Extensiones => Instalar desde URL, ingrese lo siguiente y haga clic en Instalar,

• URL extendida del repositorio de git:https://github.com/continue-revolution/sd-webui-segment-anything

Luego haga clic en Instalado, haga clic en Aplicar y reinicie la interfaz de usuario,

Descargue el archivo del modelo https://dl.fbaipublicfiles.com/segment_anything/sam_vit_h_4b8939.pth y guárdelo en stable-diffusion-webui\extensions\sd-webui-segment-anything\models\samel directorio ,

5. Instale el complemento de última generación

Haga clic en Extensiones => Instalar desde URL, ingrese lo siguiente y haga clic en Instalar,

• URL extendida del repositorio de git:https://github.com/Coyote-A/ultimate-upscale-for-automatic1111

Luego haga clic en Instalado, haga clic en Aplicar y reinicie la interfaz de usuario,

Descargue el archivo del modelo https://huggingface.co/lokCX/4x-Ultrasharp/resolve/main/4x-UltraSharp.pth y guárdelo en stable-diffusion-webui\models\ESRGANel directorio ,

6. Instala el complemento SadTaker

Haga clic en Extensiones => Instalar desde URL, ingrese lo siguiente y haga clic en Instalar,

• URL extendida del repositorio de git:https://github.com/OpenTalker/SadTalker

Luego haga clic en Instalado, haga clic en Aplicar y reinicie la interfaz de usuario,

Descargue el archivo del modelo https://github.com/OpenTalker/SadTalker/releases , guárdelo en stable-diffusion-webui\extensions/SadTalker/checkpointsel directorio , descomprímalo BFM_Fitting.zipy hub.zipen la carpeta actual,

7. Descarga y configura el modelo VAE

Descarga los siguientes modelos VAE,

• Anything-V3.0.vae.safetensores
• vae-ft-ema-560000-ema-pruned.safetensors
• vae-ft-mse-840000-ema-pruned.safetensors

Guardar en stable-diffusion-webui\models\VAEel directorio ,

Visite Configuración => "Difusión estable" para habilitar VAE para el modelo.

8. Usando el modelo ChilloutMix

Descargue el modelo (ChilloutMix](https://civitai.com/models/6424/chilloutmix) y guárdelo en stable-diffusion-webui\models\Stable-diffusionel directorio .

Descargue el modelo de ajuste fino de LoRA, primero descargue estos dos para experimentarlo y guárdelo en stable-diffusion-webui\models\Lorael directorio .

99. Continuará

¡Continuará!