omnichar/OmniChar

해결하는 문제

Omnichar Studio는 다양한 생성 모델間で 일관된 AI 캐릭터를 생성하고 유지하기 위한 통합 환경을 제공합니다. 각 샷마다 참조 사진을 수동으로 다시 연결하거나 개별 LoRA를 훈련할 필요가 없으며, 캐릭터를 한 번 정의하면 다양한 이미지와 비디오에서 일관되게 재사용할 수 있습니다.

작동 방식

이 시스템은 캐릭터의 참조 정보와 아이덴티티 지문(identity fingerprint)을 저장하는 휴대용 .char 파일을 사용합니다. 사용되는 모델에 따라 스튜디오는 유사성 처리 방식을 다르게 적용합니다:

• FLUX.2: 훈련 없이 프롬프트의 토큰 시퀀스에 참조를 직접 사용합니다.
• Krea 2: 캐릭터를 위한 작고 재사용 가능한 어댑터를 훈련합니다.
• MiniMax H3: 직접적인 참조-비디오 변환과 훈련된 어댑터 모두를 지원합니다.
• 호스팅 모델: API를 통해 참조와 고정된 설명을 전송합니다.

또한, 스튜디오에는 내장된 LoRA 트레이너가 포함되어 있어 사용자가 자신의 GPU에서 로컬로 이미지나 비디오 클립을 훈련할 수 있으며, 생성된 .safetensors 파일은 생성 워크플로에 직접 통합됩니다.

대상 사용자

여러 프레임, 샷 또는 다른 AI 모델(이미지 및 비디오) 간에 캐릭터의 높은 시각적 연속성이 필요한 AI 아티스트와 크리에이터, 그리고 자신의 하드웨어에서 생성 및 훈련 파이프라인을 로컬로 실행하는 것을 선호하는 사람들을 위해 설계되었습니다.

주요 특징

• 휴대용 캐릭터: .char 파일에서 캐릭터를 한 번 정의하고 여러 모델에서 사용할 수 있습니다.
• 통합 LoRA 훈련: GPU에서 로컬로 정지 이미지나 비디오 클립을 훈련하며, 통합 모니터링과 손실 곡선을 제공합니다.
• 멀티 모델 지원: 이미지는 FLUX.2, FLUX.1, Krea 2와 호환되며, 비디오와 사운드는 MiniMax H3와 LTX-2.5와 호환됩니다.
• 연속성 점수화: 아이덴티티 드리프트를 추적하기 위해 비디오 테이크에 대한 수치적 연속성 점수를 제공합니다.
• 저 VRAM 옵션: 저메모리 생성을 위한 Z-Image Turbo와 VRAM이 제한된 하드웨어를 위한 특정 프로필을 포함합니다.