ComfyUI — модульный интерфейс Stable Diffusion

Основные возможности

• Интерфейс на основе узлов, графов и блок-схем для создания и тестирования сложных рабочих процессов Stable Diffusion без написания кода.
• Модели изображений: SD1.x, SD2.x, SDXL, SDXL Turbo, Stable Cascade, SD3, SD3.5, Pixart Alpha/Sigma, AuraFlow, HunyuanDiT, Flux, Lumina Image 2.0, HiDream, Qwen Image, Hunyuan Image 2.1.
• Модели редактирования изображений: Omnigen 2, Flux Kontext, HiDream E1.1, Qwen Image Edit.
• Модели видео: Stable Video Diffusion, Mochi, LTX-Video, Hunyuan Video, Wan 2.1, Wan 2.2.
• Аудиомодели: Stable Audio, ACE Step.
• 3D-модели: Hunyuan3D 2.0.
• Асинхронная система очередей.
• Поддержка загрузки ckpt и safetensors: универсальных checkpoint-файлов или отдельных diffusion-моделей, VAE и CLIP-моделей. Безопасная загрузка файлов ckpt, pt, pth и других форматов.
• Embeddings/Textual inversion, Loras (regular, locon и loha), Hypernetworks.
• Загрузка рабочих процессов целиком, включая seed, из созданных файлов PNG, WebP и FLAC. Сохранение и загрузка рабочих процессов в формате Json.
• Area Composition, Inpainting с обычными моделями и моделями для inpainting, ControlNet и T2I-Adapter, Upscale Models (ESRGAN и другие), GLIGEN, Model Merging, модели и Loras LCM, а также предварительный просмотр latent с TAESD.
• Полностью работает офлайн: core никогда ничего не скачивает без вашего желания.
• Дополнительные API nodes для использования платных моделей внешних провайдеров через онлайн Comfy API.
• Поддержка асинхронных функций узлов и выполнения.

Основные характеристики

• Множество оптимизаций: между запусками повторно выполняются только изменившиеся части рабочего процесса.
• Интеллектуальное управление памятью: благодаря smart offloading большие модели можно автоматически запускать на GPU всего с 1GB VRAM.
• Работает без GPU с параметром --cpu, но медленно.
• Файл конфигурации для задания путей поиска моделей и их совместного использования другим UI и ComfyUI.
• Поддержка TLS/SSL с самоподписанными сертификатами через аргументы командной строки.

Инструкции и рабочий процесс

1. Windows Portable: скачайте и распакуйте программу, поместите checkpoints в ComfyUI\models\checkpoints и запустите. Portable-сборки доступны для GPU Nvidia и AMD.
2. Ручная установка (Windows, Linux): выполните Git clone, добавьте модели, установите PyTorch и зависимости (pip install -r requirements.txt), затем запустите python main.py.
3. Apple Mac на базе silicon: установите pytorch nightly и зависимости, затем запустите python main.py.
4. Другое оборудование: поддерживаются GPU AMD (ROCm), GPU Intel (IPEX/XPU), NPU Ascend, MLU Cambricon и Iluvatar Corex при установке соответствующих расширений PyTorch.
5. Разработка frontend: новый frontend используется по умолчанию. Аргумент --front-end-version позволяет выбрать последнюю daily-версию или конкретную версию; также можно открыть legacy frontend.

Ключевые преимущества

Высокая модульность, поддержка широкого спектра моделей для изображений, видео, аудио и 3D, эффективные smart memory и dependency-aware caching optimization, полностью открытый исходный код и работа офлайн, а также кроссплатформенная поддержка различного оборудования: NVIDIA, AMD, Intel, Apple Silicon, Ascend и других платформ.

Целевая аудитория

Разработчики генерации изображений, видео и аудио с помощью ИИ, опытные пользователи Stable Diffusion, дизайнеры, которым нужны сложные рабочие процессы, и пользователи, желающие запускать большие модели на устройствах с небольшим объёмом VRAM.

Информация о ценах

Основное программное обеспечение ComfyUI полностью бесплатное и распространяется с открытым исходным кодом по лицензии GPL-3.0. Дополнительные API nodes позволяют получать доступ к платным моделям внешних провайдеров через онлайн Comfy API; за это взимается плата внешними провайдерами.