sakalond/StableGen

해결하는 문제

StableGen은 생성형 AI를 통합하여 3D 자산의 생성과 텍스처링을 간소화하는 Blender 애드온입니다. 외부 AI 도구와 3D 소프트웨어 간 전환할 필요 없이, 이미지나 텍스트에서 텍스처가 적용된 3D 메시를 생성하고, Blender 뷰포트 내에서 기존 모델의 텍스처를 직접 수정할 수 있습니다.

작동 방식

이 애드온은 ComfyUI 백엔드를 사용하여 Blender와 여러 AI 모델을 연결합니다. 단일 이미지나 텍스트 프롬프트에서 3D 메시를 생성하는 데는 TRELLIS.2를 사용합니다. 텍스처링 및 보정에는 SDXL, FLUX.1-dev, Qwen Image Edit와 같은 확산 모델을 활용합니다. 시스템은 다중 뷰 일관성 접근 방식을 사용하며, 카메라를 활용해 다양한 각도에서 메시에 텍스처를 투영하고, 고급 블렌딩 및 인페인팅을 통해 원활한 전환을 보장합니다. 또한 물리적 색 혼합 이론을 기반으로 텍스처가 적용된 메시를 다중 색상 형식으로 변환하는 전용 3D 프린팅 세트도 포함되어 있습니다.

대상 사용자

3D 아티스트, 컨셉 아티스트, 게임 개발자 중 자산 생성 프로세스를 가속화하고 싶은 사용자, 그리고 AI 생성 텍스처를 다중 색상 슬라이서로 내보내고 싶은 3D 프린팅 애호가를 위한 것입니다.

주요 기능

• 이미지/텍스트 → 3D: TRELLIS.2를 사용해 여러 해상도 모드로 완전히 텍스처가 적용된 메시를 생성.
• 씬 전체 텍스처 적용: 씬 내 모든 메시 오브젝트에 동시에 텍스처를 적용하여 일관된 외관을 구현.
• 고급 카메라 제어: 7가지 배치 전략과 자동 비율 프레임링을 제공하여 텍스처 투영을 최적화.
• 정밀한 보정: 타겟 텍스처 수정을 위한 로컬 편집 모드와 UV 인페인팅을 통한 갭 채우기 기능.
• 3D 프린팅 내보내기: 물리적 색 혼합 솔버를 사용해 색소 누출 및 밴딩을 방지하는 3MF/STL 형식으로 내보내기.
• ControlNet 및 IPAdapter 통합: 깊이, 캐니, 노멀 맵을 사용해 기하학적 정확성을 유지하고, 참조 이미지를 스타일 가이드로 활용.