FlashML-org/FreeVideo

해결하는 문제

FreeVideo는 일반 소비자용 하드웨어에서 MiniMax H3 동영상 생성 모델을 실행할 수 있도록 합니다. 고품질 AI 동영상 생성에 필요한 높은 하드웨어 사양 문제를 메모리 사용량과 계산 경로 최적화를 통해 해결하여, 최소 8GB VRAM을 가진 GPU에서도 모델을 실행할 수 있게 합니다.

작동 방식

VDN-H3 모델과 Video DeltaNet의 하이브리드 어텐션 기반의 로컬 추론 엔진으로 작동합니다. 다음과 같은 방식으로 성능을 최적화합니다:

• 하드웨어 적응형 실행: 특정 GPU 아키텍처에 따라 최적의 계산 경로(예: 네이티브 FP8 또는 BF16)와 어텐션 커널을 자동으로 선택합니다.
• 저메모리 관리: 가중치 스트리밍, 비동기 프리페치, 청크 기반 계산을 활용해 VRAM, 시스템 RAM, 디스크 공간을 조율하여 최대 메모리 사용량을 낮춥니다.
• 통합: 시각적 작업 환경용 ComfyUI 플러그인 또는 Linux에서 명령줄 인터페이스를 통해 사용 가능합니다.

대상 사용자

기업용 고가 하드웨어 없이도 자신의 컴퓨터에서 AI 동영상을 로컬로 생성하고 싶은 콘텐츠 크리에이터 및 AI 애호가입니다.

주요 특징

• 저사양 하드웨어 호환: 최소 8GB VRAM과 16GB RAM으로도 작동 가능.
• 다중 모달 제어: 텍스트 프롬프트, 첫/마지막 프레임, 이미지, 동영상, 오디오 참조를 지원합니다.
• ComfyUI 통합: 두 번의 샘플링 단계와 배치 생성을 지원하는 전용 창작 환경 제공.
• 간편한 설치: 환경 및 모델 설치를 한 번의 클릭으로 완료할 수 있는 Windows 전용 런처 제공.