ComfyUI

Tính năng chính

• Giao diện nút, đồ thị và lưu đồ để thử nghiệm, tạo các quy trình Stable Diffusion phức tạp mà không cần viết mã.
• Mô hình hình ảnh: SD1.x, SD2.x, SDXL, SDXL Turbo, Stable Cascade, SD3, SD3.5, Pixart Alpha/Sigma, AuraFlow, HunyuanDiT, Flux, Lumina Image 2.0, HiDream, Qwen Image, Hunyuan Image 2.1.
• Mô hình chỉnh sửa hình ảnh: Omnigen 2, Flux Kontext, HiDream E1.1, Qwen Image Edit.
• Mô hình video: Stable Video Diffusion, Mochi, LTX-Video, Hunyuan Video, Wan 2.1, Wan 2.2.
• Mô hình âm thanh: Stable Audio, ACE Step.
• Mô hình 3D: Hunyuan3D 2.0.
• Hệ thống hàng đợi bất đồng bộ.
• Có thể tải ckpt và safetensors: checkpoint tất cả trong một hoặc mô hình khuếch tán độc lập, VAE và mô hình CLIP. Tải an toàn các tệp ckpt, pt, pth và các tệp tương tự.
• Embedding/inversion văn bản, LoRA (regular, locon và loha) và Hypernetwork.
• Tải toàn bộ quy trình, kèm seed, từ các tệp PNG, WebP và FLAC đã tạo. Lưu và tải quy trình dưới dạng tệp JSON.
• Ghép vùng, inpainting bằng cả mô hình thông thường và mô hình inpainting, ControlNet và T2I-Adapter, mô hình nâng cấp độ phân giải (ESRGAN, v.v.), GLIGEN, hợp nhất mô hình, mô hình và LoRA LCM, cùng bản xem trước latent với TAESD.
• Hoạt động hoàn toàn ngoại tuyến: phần lõi sẽ không tải xuống bất kỳ thứ gì trừ khi bạn muốn.
• Các nút API tùy chọn để dùng mô hình trả phí từ nhà cung cấp bên ngoài thông qua Comfy API trực tuyến.
• Hỗ trợ các hàm và việc thực thi nút bất đồng bộ.

Đặc điểm chính

• Nhiều tối ưu hóa: chỉ thực thi lại những phần của quy trình đã thay đổi giữa các lần chạy.
• Quản lý bộ nhớ thông minh: có thể tự động chạy các mô hình lớn trên GPU chỉ có 1 GB VRAM nhờ cơ chế offload thông minh.
• Có thể hoạt động không cần GPU với --cpu (chậm).
• Tệp cấu hình để đặt đường dẫn tìm kiếm mô hình và chia sẻ chúng giữa một giao diện khác với ComfyUI.
• Hỗ trợ TLS/SSL bằng chứng chỉ tự ký thông qua các đối số dòng lệnh.

Hướng dẫn và quy trình

1. Windows Portable: tải xuống, giải nén, đặt checkpoint vào ComfyUI\models\checkpoints rồi chạy. Có bản portable cho GPU Nvidia và AMD.
2. Cài đặt thủ công (Windows, Linux): git clone, đặt mô hình, cài PyTorch và các phần phụ thuộc bằng pip install -r requirements.txt, rồi chạy python main.py.
3. Apple Mac silicon: cài PyTorch nightly, cài các phần phụ thuộc rồi chạy python main.py.
4. Phần cứng khác: hỗ trợ GPU AMD (ROCm), GPU Intel (IPEX/XPU), NPU Ascend, MLU Cambricon và Iluvatar Corex với các bước cài đặt phần mở rộng PyTorch tương ứng.
5. Phát triển frontend: frontend mới là mặc định. Có thể dùng đối số --front-end-version để sử dụng bản daily mới nhất hoặc một phiên bản cụ thể, hoặc truy cập frontend cũ.

Ưu điểm chính

Kiến trúc mô-đun cao, hỗ trợ nhiều mô hình hình ảnh, video, âm thanh và 3D, quản lý bộ nhớ thông minh cùng tối ưu hóa bộ nhớ đệm dựa trên phụ thuộc, hoàn toàn mã nguồn mở và có thể hoạt động ngoại tuyến, đồng thời hỗ trợ đa nền tảng với nhiều phần cứng như NVIDIA, AMD, Intel, Apple Silicon và Ascend.

Đối tượng sử dụng

Nhà phát triển công cụ tạo hình ảnh, video và âm thanh bằng AI; người dùng Stable Diffusion nâng cao; nhà thiết kế cần quy trình phức tạp; và người dùng muốn chạy mô hình lớn trên thiết bị có VRAM thấp.

Thông tin giá

Phần mềm lõi ComfyUI hoàn toàn miễn phí và mã nguồn mở theo giấy phép GPL-3.0. Phần mềm cung cấp các nút API tùy chọn để truy cập mô hình trả phí từ nhà cung cấp bên ngoài qua Comfy API trực tuyến; các nhà cung cấp bên ngoài có thể tính phí.