Lightricks/ComfyUI-LTXVideo

LTX-Video Support for ComfyUI

What it solves

이 프로젝트는 ComfyUI를 위한 커스텀 노드와 워크플로우 세트를 제공하여 LTX-2 비디오 생성 모델의 잠재력을 최대한으로 끌어올립니다. 고역동 범위(HDR) 비디오, 움직임 및 구조에 대한 정밀한 제어, 그리고 오디오 생성을 위한 전문적인 도구를 추가하여 핵심 ComfyUI LTX-2 통합 기능을 확장합니다.

How it works

ComfyUI의 플러그인으로 통합되어 LTX-2 및 다양한 전문 LoRA(Low-Rank Adaptation)와 인터페이스하는 노드를 제공합니다. 이 LoRA들은 모델이 립싱크, 공간 업스케일링 또는 깊이 및 엣지 맵을 따르도록 하는 특정 작업을 수행할 수 있게 합니다. 또한, 이 프로젝트는 LTX-2의 오디오/비디오 결합 트랜스포머 아키텍처를 활용하여 텍스트에서 소리를 생성하는 전용 오디오 전용 모드를 포함하고 있습니다.

Who it's for

전문가급 HDR 출력 및 생성형 업스케일링을 포함하여 LTX-2 비디오 생성에 대한 고급 제어를 원하는 ComfyUI 사용자 콘텐츠 크리에이터, AI 비디오 아티스트 및 개발자입니다.

Highlights

  • Union IC-LoRA: 깊이와 엣지(canny) 제어 조건을 동시에 처리하는 단일 통합 LoRA입니다.
  • HDR Video: EXR 내보내기 기능을 갖춘 ARRI LogC3로 인코딩된 선형 HDR 출력을 지원합니다.
  • Lipdub: 화자의 정체성을 유지하면서 다국어 더빙 및 음성 재구성을 수행하는 전문 LoRA입니다.
  • Generative Upscaling: 단순한 보간법이 아닌 2x 또는 4x 해상도에서 새로운 세부 사항을 합성하는 Pixel Spatial Upscaler LoRAs입니다.
  • Text-to-Audio: 모델을 오디오 전용 모드로 사용하여 텍스트 프롬프트로부터 오디오를 생성하는 기능입니다.