caiyuanhao1998/Open-DiffusionGS

해결하는 문제

Open-DiffusionGS는 이미지에서 3D 생성의 느린 속도와 복잡성을 해결합니다. 기존 방법은 종종 다단계 프로세스나 2D 다중 뷰 확산 모델에 의존하며, 계산 비용이 크고 시간이 오래 걸릴 수 있습니다. 이 프로젝트는 단일 이미지에서 빠른 3D 객체 생성 및 장면 재구성용 단일 단계 접근법을 제공합니다.

작동 방식

시스템은 가우시안 스플래터링을 확산 노이즈 제거기 내부에 직접 '베이킹'합니다. 다른 방법과 달리, 장면 재구성에 2D 다중 뷰 확산 모델이나 깊이 추정기 필요 없이, 메시 내보내기 기능을 갖춘 3D 객체를 생성하고 약 6초 내에 장면을 재구성할 수 있습니다.

대상 사용자

이 도구는 3D 컴퓨터 비전, 생성형 AI, 디지털 콘텐츠 제작 분야에서 연구 및 개발을 하는 연구자와 개발자에게 적합하며, 고속의 단일 단계 3D 재구성 및 생성이 필요한 분들을 위한 것입니다.

주요 특징

• 단일 단계 생성: 다중 뷰 확산 모델이 필요 없음.
• 고속 성능: 장면 재구성은 약 6초, 객체 추론은 24초 (Hunyuan-v2.5 등 경쟁 제품보다 훨씬 빠름).
• 다양한 출력: 단일 뷰 3D 객체 생성과 장면 수준 재구성 모두 지원.
• 메시 내보내기: 생성된 3D 객체를 메시 형식으로 내보낼 수 있는 기능 포함.