scraed/LanPaint

해결하는 문제

LanPaint은 확산 모델을 위한 통합적이고 학습이 필요 없는 인페인팅 및 아웃페인팅 솔루션을 제공합니다. 모델별 인페인팅 학습이나 복잡한 블렌딩 대안을 필요로 하지 않으며, 다양한 이미지 및 비디오 모델에서 마스크된 영역 내에 완전히 새로운 고품질 콘텐츠를 생성할 수 있습니다.

작동 방식

LanPaint은 'Think Mode'를 구현하는 전용 샘플러를 도입합니다. 이 모드는 최종 노이즈 제거 프로세스가 시작되기 전에 모델이 내부 처리(사고)를 여러 번 수행할 수 있게 합니다. 이러한 반복을 통해 계산 시간을 더 투자함으로써 점근적으로 정확하고 빠른 조건부 샘플링을 달성하며, 모델 가중치를 변경하지 않고도 우수한 인페인팅 품질을 얻을 수 있습니다.

대상 사용자

주로 ComfyUI를 사용하는 디지털 아티스트 및 AI 연구자로, Flux, SDXL, Wan 2.2, MiniMax H3 등의 다양한 모델에서 맞춤형 인페인팅 버전을 학습하지 않고도 고해상도 인페인팅 및 아웃페인팅을 원하는 사용자에게 적합합니다.

주요 특징

• 통합 호환성: Ideogram4, Krea2, Z-image, Hunyuan, Wan 2.2, Qwen, Anima, SD 3.5, Flux, SDXL 등 다양한 모델과 호환됩니다.
• 학습 없음: 추가 학습이나 피니튜닝 없이 기존 모델과 즉시 사용 가능합니다.
• 다중 모달 인페인팅: MiniMax H3 파이프라인을 사용하여 비디오와 오디오를 동시에 인페인팅할 수 있습니다.
• 통합 비디오 마스크 편집기: 키프레임 간 자동 보간 기능이 있는 내장 편집기를 통해 프레임별 마스크를 그릴 수 있습니다.
• 시간적 일관성: 비디오 프레임 간 일관성을 유지하여 비디오 인페인팅 및 아웃페인팅 작업에 적합합니다.