seesee75-commits/ComfyUI-MiniMaxH3-Director

해결하는 문제

MiniMax H3는 비디오와 오디오를 동시에 생성하는 강력한 모델이지만, ComfyUI에서 사용하려면 일반적으로 수동으로 복잡한 프롬프트를 작성하고 프레임 수를 세야 합니다. 이 프로젝트는 타임라인 기반 편집기를 제공하여 수동 스토리보드 프롬프트를 샷, 키프레임, 오디오 트랙을 관리하는 시각적 인터페이스로 대체합니다.

작동 방식

이 프로젝트는 ComfyUI용 노드 세트를 도입하여 생성 프로세스를 스토리보드 워크플로우로 변환합니다. 사용자는 이미지, 비디오, 오디오 클립을 타임라인에 끌어다 놓아 샷과 타임스탬프를 정의할 수 있습니다. 시스템은 이러한 시각적 배열을 MiniMax H3가 요구하는 특정 프롬프트 형식으로 자동 컴파일하므로 사용자는 렌더링 전에 정확한 프롬프트를 볼 수 있습니다.

대상 사용자

ComfyUI를 사용하는 콘텐츠 제작자와 AI 비디오 아티스트로, 길고 수동적인 텍스트 프롬프트를 작성하는 대신 MiniMax H3를 위한 더 직관적이고 전문적인 편집 스타일 워크플로우를 원하는 사람들.

주요 기능

• 타임라인 편집기: 초 또는 프레임 단위의 눈금자로 샷, 키프레임, 오디오 트랙을 시각적으로 관리.
• 자동 프롬프트 생성: 타임라인 세그먼트와 참조 자산에서 스토리보드 프롬프트를 자동으로 컴파일.
• 참조 관리: 피사체(사람, 장면, 소품) 전용 슬롯과 참조 비디오 및 오디오 지원.
• 오디오 통합: 참조 오디오, 믹스된 사운드트랙, 피사체별 특정 음성 클립 할당을 지원.
• VLM 통합: 로컬 비전 모델을 사용하여 참조 이미지를 설명하는 "분석" 버튼과 Enhance Prompt 노드를 포함.
• 리테이크 시스템: 재생성된 범위를 기본 비디오에 접합하는 전용 노드.