Framepack AI

Funzionalità principali

• Comprime tutti i fotogrammi di input in «note» di contesto a lunghezza fissa, evitando che l’uso della memoria aumenti con la durata del video.
• Genera video da 60 a 120 secondi a 30 fps con 6 GB di VRAM su GPU NVIDIA RTX 30XX, 40XX e 50XX.
• Circa 2,5 secondi per fotogramma su RTX 4090, oppure 1,5 secondi con l’ottimizzazione teacache.
• La compressione progressiva e la gestione differenziale riducono il fenomeno del «drift».
• Supporta PyTorch attention, xformers, flash-attn e sage-attention.

Caratteristiche tecniche

Si basa su una struttura neurale di previsione del fotogramma successivo e separa il carico computazionale dalla durata del video. Supporta i formati FP16 e BF16. È open source e disponibile gratuitamente su GitHub.

Flusso di utilizzo

1. Prepara un’immagine di input.
2. Configura i parametri di generazione.
3. Avvia la generazione del video.
4. Esporta il video in alta qualità.

È pensato per creatori di contenuti, professionisti della produzione video, ricercatori IA e utenti con GPU consumer. Funziona localmente, contribuendo a proteggere la privacy. È gratuito e open source, senza restrizioni d’uso.

FAQ

Richiede una GPU NVIDIA RTX 30XX, 40XX o 50XX con almeno 6 GB di VRAM ed è compatibile con Windows e Linux. In base all’hardware e alle ottimizzazioni, può generare video a 30 fps di 60–120 secondi. È stato sviluppato da Lvmin Zhang, creatore di ControlNet, e dal professore di Stanford Maneesh Agrawala; codice e modelli sono disponibili pubblicamente su GitHub.