Fannovel16/comfyui_controlnet_aux

What it solves

이 프로젝트는 ControlNet을 위한 "힌트 이미지"(전처리기)를 생성하는 ComfyUI용 종합적인 플러그인 방식의 노드 세트를 제공합니다. 이러한 힌트 이미지는 소스 이미지를 기반으로 AI 생성 이미지의 구조, 포즈, 또는 깊이를 가이드하는 데 사용됩니다.

How it works

원본 ControlNet 어노테이터의 다양한 전처리기 모델을 통합하여 Hugging Face Hub의 모델 가중치를 연결합니다. 선 추출, 깊이 추정, 포즈 검출 등 다양한 전문화된 노드들을 제공합니다.

Performance

성능을 위해 DWPose와 같은 특정 추정기의 경우 TorchScript 및 ONNXRuntime을 통한 GPU 가속을 지원합니다.

Who it’s for

ControlNet을 사용하여 AI 이미지 생성 워크플로우의 레이아웃과 구조를를 precisely control하고 싶은 ComfyUI 사용자입니다.

Who it's for

ControlNet을 사용하여 AI 이미지 생성 워크플로우의 레이아웃과 구조를 precisely control하고 싶은 ComfyUI 사용자입니다.

Highlights

• Extensive Preprocessor Library: 선 추출기(Canny, HED, Lineart), 깊이/법선 추정기(MiDaS, Zoe, Depth Anything), 포즈 추정기(OpenPose, DWPose)를 포함합니다.

• AIO Aux Preprocessor: 노드를 수동적으로 switching การเปลี่ยน 노드를 수동으로 교체할 필요 없이 대부분의 전처리기에 빠르게 접근할 수 있는 단일 노드입니다.

• Pose Data Export: 포즈 키포인트를 이미지로 저장하거나 개발자 및 API 사용자를 위해 OpenPose-format JSON으로 내보낼 수 있는 기능이 있습니다.

• Hardware Acceleration: GPU에서 포즈 추정을 속도를 높이기 위해 ONNXRuntime 및 TorchScript를 지원합니다.