Deep Floyd

Para empezar a usar los modelos IF rápidamente, puedes usar Google Colab o Hugging Face Spaces. También puedes instalar los paquetes necesarios usando pip: pip install deepfloyd_if==1.0.2rc0, pip install xformers==0.0.16, y pip install git+https://github.com/openai/CLIP.git --no-deps.

IF está integrado con la biblioteca 🤗 Hugging Face Diffusers, lo que permite a los usuarios personalizar el proceso de generación de imágenes e inspeccionar fácilmente los resultados intermedios. Cada etapa se ejecuta de forma individual, proporcionando flexibilidad en la tubería de generación.

Para ejecutar el código localmente, necesitas cargar los modelos en VRAM usando el siguiente código: from deepfloyd_if.modules import IFStageI, IFStageII, StableStageIII. Luego puedes crear instancias de estas clases y ejecutar el modelo con los parámetros deseados.

Los diferentes modos disponibles en IF incluyen Sueño (texto a imagen), Traducción de Imagen a Imagen Zero-shot, Super Resolución y Relleno Zero-shot.