ComfyUI

Funciones principales

• Interfaz de nodos, gráficos y diagramas de flujo para experimentar y crear flujos de trabajo complejos de Stable Diffusion sin programar.
• Modelos de imagen: SD1.x, SD2.x, SDXL, SDXL Turbo, Stable Cascade, SD3, SD3.5, Pixart Alpha/Sigma, AuraFlow, HunyuanDiT, Flux, Lumina Image 2.0, HiDream, Qwen Image, Hunyuan Image 2.1.
• Modelos de edición de imágenes: Omnigen 2, Flux Kontext, HiDream E1.1, Qwen Image Edit.
• Modelos de video: Stable Video Diffusion, Mochi, LTX-Video, Hunyuan Video, Wan 2.1, Wan 2.2.
• Modelos de audio: Stable Audio, ACE Step.
• Modelos 3D: Hunyuan3D 2.0.
• Sistema de colas asíncronas.
• Puede cargar ckpt y safetensors: checkpoints todo en uno o modelos de difusión independientes, VAE y modelos CLIP. Carga segura de archivos ckpt, pt, pth y otros.
• Embeddings e inversión textual, LoRAs (regulares, locon y loha) e hipernetworks.
• Carga de flujos de trabajo completos, con semillas, desde archivos PNG, WebP y FLAC generados. Guarda y carga flujos de trabajo como archivos JSON.
• Composición por áreas, inpainting con modelos normales y de inpainting, ControlNet y T2I-Adapter, modelos de aumento de resolución (ESRGAN, etc.), GLIGEN, combinación de modelos, modelos y LoRAs LCM y vistas previas latentes con TAESD.
• Funciona completamente sin conexión: el núcleo nunca descarga nada a menos que lo solicites.
• Nodos API opcionales para usar modelos de pago de proveedores externos mediante la Comfy API en línea.
• Admite funciones y ejecución de nodos asíncronas.

Características principales

• Muchas optimizaciones: solo vuelve a ejecutar las partes del flujo de trabajo que cambian entre ejecuciones.
• Gestión inteligente de memoria: puede ejecutar automáticamente modelos grandes en GPU con tan solo 1 GB de VRAM mediante descarga inteligente.
• También funciona sin GPU con --cpu (de forma lenta).
• Archivo de configuración para establecer rutas de búsqueda de modelos y compartirlas entre otra interfaz y ComfyUI.
• Admite TLS/SSL mediante certificados autofirmados usando argumentos de línea de comandos.

Instrucciones y flujo de trabajo

1. Windows Portable: descarga, extrae, coloca los checkpoints en ComfyUI\models\checkpoints y ejecuta. Hay compilaciones portátiles para GPU Nvidia y AMD.
2. Instalación manual (Windows, Linux): clona el repositorio con Git, coloca los modelos, instala PyTorch y las dependencias con pip install -r requirements.txt y ejecuta python main.py.
3. Apple Mac silicon: instala la versión nightly de PyTorch, instala las dependencias y ejecuta python main.py.
4. Otro hardware: admite GPU AMD (ROCm), GPU Intel (IPEX/XPU), NPU Ascend, MLU Cambricon e Iluvatar Corex mediante instalaciones específicas de extensiones de PyTorch.
5. Desarrollo del frontend: el frontend nuevo es el predeterminado. Puedes usar el argumento --front-end-version para utilizar la última versión diaria o una versión específica, o acceder al frontend heredado.

Ventajas principales

Arquitectura altamente modular, compatibilidad con una gran variedad de modelos de imagen, video, audio y 3D, excelente gestión inteligente de memoria y optimización de caché basada en dependencias, funcionamiento completamente de código abierto y sin conexión, y compatibilidad multiplataforma con hardware diverso, como NVIDIA, AMD, Intel, Apple Silicon y Ascend.

Usuarios objetivo

Desarrolladores de generación de imágenes, videos y audio con IA; usuarios avanzados de Stable Diffusion; diseñadores que necesitan flujos de trabajo complejos; y usuarios que buscan ejecutar modelos grandes en dispositivos con poca VRAM.

Información de precios

El software principal de ComfyUI es completamente gratuito y de código abierto, con licencia GPL-3.0. Ofrece nodos API opcionales para acceder a modelos de pago de proveedores externos mediante la Comfy API en línea, lo que implica cargos de dichos proveedores.