ComfyUI

Hauptfunktionen

• Knoten-, Graph- und Flussdiagrammoberfläche zum Experimentieren und Erstellen komplexer Stable-Diffusion-Workflows ohne Programmierung.
• Bildmodelle: SD1.x, SD2.x, SDXL, SDXL Turbo, Stable Cascade, SD3, SD3.5, Pixart Alpha/Sigma, AuraFlow, HunyuanDiT, Flux, Lumina Image 2.0, HiDream, Qwen Image, Hunyuan Image 2.1.
• Modelle zur Bildbearbeitung: Omnigen 2, Flux Kontext, HiDream E1.1, Qwen Image Edit.
• Videomodelle: Stable Video Diffusion, Mochi, LTX-Video, Hunyuan Video, Wan 2.1, Wan 2.2.
• Audiomodelle: Stable Audio, ACE Step.
• 3D-Modelle: Hunyuan3D 2.0.
• Asynchrones Warteschlangensystem.
• Kann ckpt und safetensors laden: All-in-one-Checkpoints oder eigenständige Diffusionsmodelle, VAEs und CLIP-Modelle. Sicheres Laden von ckpt-, pt-, pth- und ähnlichen Dateien.
• Embeddings und Textual Inversion, LoRAs (regulär, locon und loha) sowie Hypernetworks.
• Laden vollständiger Workflows einschließlich Seeds aus erzeugten PNG-, WebP- und FLAC-Dateien. Workflows als JSON-Dateien speichern und laden.
• Flächenkomposition, Inpainting mit regulären und Inpainting-Modellen, ControlNet und T2I-Adapter, Upscale-Modelle (ESRGAN usw.), GLIGEN, Modellzusammenführung, LCM-Modelle und -LoRAs sowie latente Vorschauen mit TAESD.
• Funktioniert vollständig offline: Der Kern lädt nie etwas herunter, außer wenn du es möchtest.
• Optionale API-Knoten zur Nutzung kostenpflichtiger Modelle externer Anbieter über die Online-Comfy-API.
• Unterstützung für asynchrone Knotenfunktionen und Ausführung.

Haupteigenschaften

• Zahlreiche Optimierungen: Zwischen Ausführungen werden nur die Teile des Workflows erneut ausgeführt, die sich ändern.
• Intelligente Speicherverwaltung: Große Modelle können durch intelligentes Offloading automatisch auf GPUs mit nur 1 GB VRAM ausgeführt werden.
• Funktioniert auch ohne GPU mit --cpu (langsam).
• Konfigurationsdatei zum Festlegen von Modellsuchpfaden, die mit einer anderen Benutzeroberfläche und ComfyUI geteilt werden können.
• Unterstützt TLS/SSL mit selbstsignierten Zertifikaten über Befehlszeilenargumente.

Anleitung und Workflow

1. Windows Portable: herunterladen, entpacken, Checkpoints in ComfyUI\models\checkpoints ablegen und ausführen. Portable Builds sind für Nvidia- und AMD-GPUs verfügbar.
2. Manuelle Installation (Windows, Linux): per Git klonen, Modelle ablegen, PyTorch und Abhängigkeiten mit pip install -r requirements.txt installieren und python main.py ausführen.
3. Apple Mac silicon: PyTorch Nightly installieren, Abhängigkeiten installieren und python main.py ausführen.
4. Andere Hardware: Unterstützt AMD-GPUs (ROCm), Intel-GPUs (IPEX/XPU), Ascend-NPUs, Cambricon-MLUs und Iluvatar Corex mit spezifischen PyTorch-Erweiterungen.
5. Frontend-Entwicklung: Das neue Frontend ist standardmäßig aktiviert. Mit --front-end-version kann die neueste tägliche oder eine bestimmte Version verwendet werden; alternativ ist das ältere Frontend verfügbar.

Zentrale Vorteile

Hochgradig modulare Architektur, Unterstützung zahlreicher Bild-, Video-, Audio- und 3D-Modelle, intelligente Speicherverwaltung und abhängigkeitenbewusste Cache-Optimierung, vollständig quelloffener und offlinefähiger Betrieb sowie plattformübergreifende Unterstützung für verschiedene Hardware, darunter NVIDIA, AMD, Intel, Apple Silicon und Ascend.

Zielgruppe

Entwickler für KI-basierte Bild-, Video- und Audiogenerierung, fortgeschrittene Stable-Diffusion-Nutzer, Designer mit Bedarf an komplexen Workflows und Nutzer, die große Modelle auf Geräten mit wenig VRAM ausführen möchten.

Preisinformationen

Die ComfyUI-Kernsoftware ist vollständig kostenlos und quelloffen und steht unter der GPL-3.0-Lizenz. Optionale API-Knoten ermöglichen den Zugriff auf kostenpflichtige Modelle externer Anbieter über die Online-Comfy-API; dabei fallen Gebühren der externen Anbieter an.