james-see/ltx-video-mac

해결하는 문제

LTX Video Generator for Mac은 Apple Silicon에서 LTX-2 비디오 생성 모델을 로컬로 실행할 수 있는 네이티브 macOS 애플리케이션을 제공합니다. AI 비디오 생성의 복잡한 설정 과정을 단순화하여, 텍스트 또는 이미지로부터 동기화된 오디오, 음성 해설 및 배경 음악이 포함된 비디오를 제작할 수 있는 사용자 친화적인 인터페이스를 제공합니다.

작동 원리

이 앱은 SwiftUI로 구축되었으며 M 시리즈 칩에서 성능을 최적화하기 위해 MLX 프레임워크를 사용합니다. 2단계 파이프라인을 구현합니다. 먼저 절반 해상도로 비디오를 생성한 다음, 이를 전체 해상도로 업샘플링 및 정밀화합니다. 통합 오디오-비디오 모델(LTX-2 및 LTX-2.3)과 메모리 사용량을 줄이기 위한 증류된 Q4 버전을 포함한 다양한 모델 변형을 지원합니다.

대상 사용자

클라우드 서비스에 의존하지 않고 로컬에서 AI 비디오를 생성하고자 하는 Apple Silicon(M1-M4) 및 최소 32GB RAM을 갖춘 Mac 사용자, 그리고 음성 해설(MLX-Audio 또는 ElevenLabs를 통해) 및 배경 음악을 추가하기 위한 통합된 워크플로를 원하는 사용자.

주요 특징

• 네이티브 Apple Silicon 성능: M 시리즈 칩을 위해 MLX를 통해 최적화됨.
• 통합 오디오: 통합 모델을 사용하여 비디오와 함께 동기화된 오디오를 자동으로 생성.
• 멀티모달 입력: 텍스트-to-비디오 및 이미지-to-비디오 생성을 모두 지원.
• 프롬프트 강화: 짧은 설명을 상세하고 최적화된 프롬프트로 변환하기 위한 선택적 Gemma 기반 프롬프트 확장.
• 완벽한 오디오 스위트: 음성 해설을 위한 로컬 MLX-Audio 또는 클라우드 기반 ElevenLabs 및 배경 음악을 위한 54가지 장르 프리셋.
• 큐 및 히스토리: 여러 생성 작업을 위한 내장 관리 기능 및 생성 후 오디오 추가를 위한 비디오 아카이브.