ComfyUI — modulaire Stable Diffusion-interface

Belangrijkste functies

• Een interface met nodes, grafieken en stroomdiagrammen om complexe Stable Diffusion-workflows te testen en te maken zonder code te schrijven.
• Afbeeldingsmodellen: SD1.x, SD2.x, SDXL, SDXL Turbo, Stable Cascade, SD3, SD3.5, Pixart Alpha/Sigma, AuraFlow, HunyuanDiT, Flux, Lumina Image 2.0, HiDream, Qwen Image, Hunyuan Image 2.1.
• Modellen voor beeldbewerking: Omnigen 2, Flux Kontext, HiDream E1.1, Qwen Image Edit.
• Videomodellen: Stable Video Diffusion, Mochi, LTX-Video, Hunyuan Video, Wan 2.1, Wan 2.2.
• Audiomodellen: Stable Audio, ACE Step.
• 3D-modellen: Hunyuan3D 2.0.
• Asynchroon wachtrijsysteem.
• Kan ckpt- en safetensors-bestanden laden: alles-in-één-checkpoints of afzonderlijke diffusionmodellen, VAE- en CLIP-modellen. Veilig laden van bestanden met de extensies ckpt, pt, pth en andere.
• Embeddings/Textual inversion, Loras (regular, locon en loha), Hypernetworks.
• Volledige workflows, inclusief seeds, laden uit gegenereerde PNG-, WebP- en FLAC-bestanden. Workflows opslaan en laden als Json-bestanden.
• Area Composition, Inpainting met reguliere en inpainting-modellen, ControlNet en T2I-Adapter, Upscale Models (ESRGAN enzovoort), GLIGEN, Model Merging, LCM-modellen en Loras, en latent previews met TAESD.
• Werkt volledig offline: de core downloadt niets tenzij je dat wilt.
• Optionele API nodes om betaalde modellen van externe providers te gebruiken via de online Comfy API.
• Ondersteuning voor asynchrone nodefuncties en uitvoering.

Belangrijkste kenmerken

• Veel optimalisaties: tussen uitvoeringen worden alleen de gewijzigde delen van de workflow opnieuw uitgevoerd.
• Slim geheugenbeheer: kan met smart offloading automatisch grote modellen uitvoeren op GPU's met slechts 1GB VRAM.
• Werkt ook zonder GPU met --cpu, maar langzaam.
• Configuratiebestand om zoekpaden voor modellen in te stellen en modellen te delen tussen een andere UI en ComfyUI.
• Ondersteuning voor TLS/SSL met self-signed certificates via opdrachtregelargumenten.

Instructies en workflow

1. Windows Portable: download en pak het programma uit, plaats checkpoints in ComfyUI\models\checkpoints en start het. Portable builds zijn beschikbaar voor Nvidia- en AMD-GPU's.
2. Handmatige installatie (Windows, Linux): voer een Git clone uit, plaats de modellen, installeer PyTorch en de dependencies (pip install -r requirements.txt) en voer python main.py uit.
3. Apple Mac silicon: installeer pytorch nightly en de dependencies en voer python main.py uit.
4. Andere hardware: ondersteuning voor AMD-GPU's (ROCm), Intel-GPU's (IPEX/XPU), Ascend-NPU's, Cambricon-MLU's en Iluvatar Corex met specifieke installaties van PyTorch-extensies.
5. Frontendontwikkeling: de nieuwe frontend is standaard actief. Gebruik het argument --front-end-version voor de nieuwste daily- of een specifieke versie, of open de legacy frontend.

Belangrijkste voordelen

Uiterst modulair, ondersteuning voor een groot aantal modellen voor afbeeldingen, video, audio en 3D, uitstekende smart memory en dependency-aware caching optimization, volledig open source en offline te gebruiken, plus platformonafhankelijke ondersteuning voor uiteenlopende hardware zoals NVIDIA, AMD, Intel, Apple Silicon en Ascend.

Doelgroep

Ontwikkelaars van AI-beeld-, video- en audiogeneratie, gevorderde Stable Diffusion-gebruikers, ontwerpers die complexe workflows nodig hebben en gebruikers die grote modellen willen uitvoeren op apparaten met weinig VRAM.

Prijsinformatie

De ComfyUI-core is volledig gratis en open source onder de GPL-3.0-licentie. Optionele API nodes bieden toegang tot betaalde modellen van externe providers via de online Comfy API; hiervoor kunnen kosten van externe providers gelden.