SkyworkAI/UniPic
Open-source SOTA multi-image editing model
What it solves
Skywork-UniPic은 단일 프레임워크 내에서 이미지 생성, 편집 및 이해를 처리하도록 설계된 일련의 통합 멀티모달 모델입니다. 이는 서로 다른 시각적 작업을 위해 별도의 모델을 사용할 필요를 없애며, 고충실도 합성 및 강력한 인식을 위한 다재다능한 도구 세트를 제공합니다.
How it works
이 프로젝트는 세 가지 뚜렷렷한 모델링 패러다임으로 구성됩니다:
- UniPic-3: 1-6개의 입력 이미지를 유연한 해상도로 지원하는 멀티 이미지 편집 모델입니다. CM + DMD distillation을 사용하여 8단계 추론을 구현하여 12.5배의 속도 향상을 가져옵니다.
- UniPic-2: 효율적인 아키텍처와 Diffusion Post-Training을 기반으로 하며, 텍스트-이미지 생성, 미세 조정 편집 및 멀티모달 추론을 위한 SD3.5M-Kontext 및 MetaQuery와 같은 변형을 특징으로 합니다.
- UniPic-1: 1.5B 파라미터 모델로, Unified Autoregressive Modeling을 사용하여 단일 Transformer에서 시각적 인식(이해)과 합성(생성)을 모두 처리합니다.
Who it’s for
콘텐츠 제작자, AI 연구원 및 개발자로서 이미지 조작, 고속 이미지 편집 및 멀티모달 시각적 추론을 위한 통합된 접근 방식이 필요합니다.
Highlights
- Unified Framework: 생성, 편집, 이해를 하나의 시리즈로 결합합니다.
- Multi-Image Support: UniPic-3는 구성 성분으로 최대 6개의 입력 이미지를 처리할 수 있습니다.
- High-Speed Inference: UniPic-3는 8단계 distillation을 통해 12.5배 더 빠른 추론을 제공합니다.
- Diverse Paradigms: 자기회귀 및 확산 기반의 post-training approaches를 제공합니다.