Repositorio de LoRAs para generación de imágenes de pictogramas usando modelos de Stable Diffusion, con el objetivo ayudar a la Comunicación Aumentativa y Alternativa (CAA).
- Introducción
- Guía de Uso
- LoRAs Stable Diffusion 1-5
- LoRAs Stable Diffusion XL
- Recomendaciones de Modelos y LoRAs
- Notas Adicionales
- Enlaces Útiles
Este repositorio contiene LoRAs entrenados para la generación de pictogramas utilizando modelos de Stable Diffusion. Los LoRAs están diseñados para generar imágenes con el estilo de pictogramas de la base de datos de ARASAAC, dos estilos disponibles Base y Stickman.
Estilo Base
Estilo Stickman
Para utilizar los LoRAs de manera sencilla, primero necesitarás instalar una interfaz gráfica de usuario (GUI) estilo WebUI. Este tipo de interfaz facilita la generación de imágenes con tus LoRAs y modelos preentrenados.
- Recomendación: Instalar Stable Diffusion WebUI o una GUI compatible.
Nota: Asegúrate de seguir todas las instrucciones de instalación y cumplir con los requisitos del sistema.
Una vez instalada la GUI, necesitas descargar los modelos compatibles.
- Modelos recomendados:
- RealisticVision: Ideal para LoRAs entrenados con Stable Diffusion 1.5.
- DreamShaper: LoRAs entrenados con Stable Diffusion 1.5.
- Juggernaut XL: Ideal para LoRAs entrenados con Stable Diffusion XL, es un modelo muy exigente.
- DreamShaper XL Turbo: LoRAs entrenados con Stable Diffusion XL, menos exigente y mas rapido que juggernaut XL.
Nota: Puedes elegir el modelo que más te convenga según tus necesidades. Este debe ser basado en Stable Diffusion 1.5 o Stable Diffusion XL, dependiendo del LoRA que elejido.
Ahora, descarga los LoRAs disponibles. Asegúrate de elegir el archivo correcto según el modelo que estás utilizando.
- LoRAs disponibles:
Recomendación: Si tienes dudas sobre qué LoRA elegir, revisa la documentación adicional para obtener más detalles sobre las opciones disponibles.
Una vez que hayas descargado el modelo y el LoRA, sigue estos pasos para generar imágenes:
-
Cargar el modelo en la GUI WebUI.
- En la sección de "Modelo", selecciona el modelo adecuado (por ejemplo, DreamShaper).
-
Activar el LoRA.
- En la sección de LoRAs, activa el archivo
.safetensorscorrespondiente, en WebUI poner el LoRA en el prompt y el peso adecuado para este.
- En la sección de LoRAs, activa el archivo
-
Configurar los parámetros de generación.
- Clip Skip en 2 y otros parametros que quieras personalizar.
-
Usar la palabra clave.
- En el campo de texto, usa la palabra "arasaac" para activar el LoRA.
-
Generar la imagen.
- Escribir el prompt y observa cómo se crea tu pictograma.
Estos LoRAs deben ser utilizados con un modelo basado en Stable Diffusion 1.5.
- Huggingface
- Modelo safetensors
- Configuración
- Trigger Word: arasaac
- Peso del LoRA: recomendado 0.7, rango [0.6-1.1]
- Parametros: Clip Skip = 2
- Modelos de generación basados en SD 1.5
- Huggingface
- Modelo safetensors
- Configuración
- Trigger Word: arasaac
-
Peso del LoRA:
$\pm 1.2$ - Parametros: Clip Skip = 2
- Modelos de generación basados en SD 1.5
Estos LoRAs deben ser utilizados con un modelo basado en Stable Diffusion XL.
- Huggingface
- Modelo safetensors
- Configuración
- Trigger Word: arasaac
-
Peso del LoRA:
$\pm 1$ - Parametros: Clip Skip = 2
- Modelos de generación basados en SDXL
- Huggingface
- Modelo safetensors
- Configuración
- Trigger Word: arasaac
-
Peso del LoRA:
$\pm 1.1$ - Parametros: Clip Skip = 2
- Modelos de generación basados en SDXL
- Huggingface
- Modelo safetensors
- Configuración
- Trigger Word: arasaac
-
Peso del LoRA:
$\pm 1.1$ - Parametros: Clip Skip = 2
- Modelos de generación basados en SDXL
Recomendación: El valor de peso indicado en cada LoRA es genérico, probar diferentes pesos a la hora de generar con los LoRAs. Según el prompt se obtienen mejores resultados con valores mas altos o bajos.
-
LoRAs XL: Son ideales para usar con modelos basados en Stable Diffusion XL como DreamShaper XL Turbo o Juggernaut XL. Proporcionan imágenes detalladas y con mayor control sobre los resultados.
-
LoRAs estándar: Funcionan bien con modelos basados en Stable Diffusion 1.5 como DreamShaper.
Recomendación: Los basado en SD 1.5 han sido mas probado y sus exigencias hardware son menores, además su velocidad de generacion es superior. Empieza con RealisticVision junto con el LoRA "Arasaac - Estilo: Base" para obtener buenos resultados.
- Instalar GUI WebUI
- Descargar RealisticVision - Descargar DreamShaper - Descargar Juggernaut XL - Descargar DreamShaper XL Turbo
- Proyecto en Huggingface
- Instalar GUI.
- Descargar Modelo (modelo compatible con el LoRA que uses).
- Descargar LoRA.
- Generar imágenes con "arasaac" como palabra clave.