TTPlanetPig/Comfyui_TTP_Toolset

for tile the image for advanced control or modification

해결하는 문제

ComfyUI TTP Toolset은 기존의 고정 그리드 방식 타일 업스케일링이 가진 한계를 해결합니다. 표준 그리드는 종종 중요한 시각적 요소(얼굴, 손, 텍스트 등)를 절반으로 나누거나, 영역이 복잡한 초점인지 단순한 배경인지에 관계없이 이미지 전체에 균일한 디테일 수준을 적용합니다.

작동 원리

이 프로젝트의 핵심은 객체 인식형 타일 기반 img2img 워크플로우인 Smart Tile 2.0입니다. 동일한 크기의 정사각형 대신 시각적 구조에 따라 가변 크기의 타일을 생성합니다.

  1. 타일 생성: 사용자는 수동으로 타일을 정의하거나, 마스크를 그리거나, SAM3.1 또는 QwenVL3를 통한 자동 감지를 사용하여 특정 객체(얼굴, 눈, 손 등)를 식별할 수 있습니다.
  2. 루프 처리: 특수 루프 시스템(Loop SourceLoop Collect)이 타일을 하나씩 img2img 샘플러로 보냅니다. 이를 통해 타일별 프롬프트(QwenVL을 통해 자동 생성)가 가능하며, 샘플링 전에 각 타일을 개별적으로 업스케일링하여 메가픽셀 제한을 통해 VRAM을 관리할 수 있습니다.
  3. 지능형 조립: 처리된 타일은 의미론적 순위 시스템을 사용하여 다시 붙여집니다. 이를 통해 고디테일 초점 타일(눈 등)이 더 큰 컨텍스트 타일(얼굴이나 배경 등) 위에 페더링, 색상 보정, 마스크 인식 블렌딩과 함께 배치되어 이음새를 방지합니다.

대상 사용자

ComfyUI를 사용하는 디지털 아티스트 및 AI 이미지 제작자로, 복잡한 인물 사진이나 상세한 장면에서 디테일 밀도와 객체 무결성을 정밀하게 제어하며 고해상도 업스케일링이 필요한 분들에게 적합합니다.

주요 특징

  • 객체 인식형 타일링: 시각적 구조를 가로지르지 않고 구조를 감싸는 가변 크기 타일.
  • 자동화된 프롬프트: QwenVL과의 통합을 통해 각 개별 타일에 대한 특정 프롬프트 생성.
  • 의미론적 레이어링: 조립 과정에서 디테일이 많은 타일(얼굴, 텍스트)을 배경 타일 위에 자동으로 배치하는 우선순위 시스템.
  • 효율적인 루프 워크플로우: 타일을 순차적으로 처리하여 ComfyUI 그래프 내에서 샘플러 체인이 중복되는 것을 방지.
  • 유연한 조립: GPU 가속 붙여넣기, 히스토그램 색상 보정 및 다중 합성 모드(예: safe_auto 또는 replace_tile) 지원.

관련

  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트