Framepack AI

주요 기능

• 입력 프레임을 고정 길이 컨텍스트 ‘노트’로 압축해 영상 길이에 따른 메모리 증가를 막습니다.
• NVIDIA RTX 30XX, 40XX, 50XX GPU에서 6GB VRAM으로 60~120초, 30fps 고품질 영상을 생성합니다.
• RTX 4090에서 프레임당 약 2.5초, teacache 최적화 시 약 1.5초가 걸립니다.
• 중요도에 따른 점진적 압축과 차등 처리로 ‘드리프트’ 현상을 줄입니다.
• PyTorch attention, xformers, flash-attn, sage-attention을 지원합니다.

기술 정보

다음 프레임 예측 신경망 구조를 기반으로 하며 계산량이 영상 길이와 분리됩니다. FP16과 BF16을 지원하고 GitHub에서 오픈 소스로 무료 제공됩니다.

사용 흐름과 대상 사용자

1. 입력 이미지를 준비합니다.
2. 생성 매개변수를 설정합니다.
3. 영상 생성을 시작합니다.
4. 고품질 영상을 내보냅니다.

콘텐츠 제작자, 영상 제작 전문가, AI 연구자, 소비자용 GPU 사용자에게 적합합니다. 기기에서 로컬로 실행되어 개인정보 보호에 도움이 됩니다. 무료 오픈 소스이며 사용 제한이 없습니다.

FAQ

Windows 또는 Linux 시스템에서 최소 6GB VRAM의 NVIDIA RTX 30XX, 40XX, 50XX GPU가 필요합니다. 하드웨어 구성과 최적화 방법에 따라 60~120초 길이의 30fps 영상을 생성할 수 있습니다. ControlNet 제작자 Lvmin Zhang과 스탠퍼드 교수 Maneesh Agrawala가 개발했으며 코드와 모델은 GitHub에 공개되어 있습니다.