NVlabs/nvdiffrecmc

해결하는 문제

다중 시점 이미지 관측만을 사용하여 장면을 기본 구성 요소인 토폴로지(형태), 재질, 조명으로 분해하는 문제를 해결합니다.

작동 방식

이 프로젝트는 3D 기하학, 재질 특성, 환경 조명을 동시에 최적화하는 방법을 구현합니다. 제공된 이미지 기반으로 몬테카를로 렌더링과 노이즈 제거를 활용하여 이러한 요소들을 정교화하며, Blender와 같은 소프트웨어로 내보낼 수 있는 3D 모델을 추출할 수 있습니다.

대상 사용자

고성능 NVIDIA GPU(OptiX 7.3+ 지원)를 보유한 컴퓨터 비전 및 그래픽스 분야의 연구자 및 개발자에게 적합합니다. 이미지에서 세부적인 3D 자산을 재구성하고자 하는 분들께 추천합니다.

주요 특징

• 다중 시점 이미지에서 형태, 재질, 조명을 동시에 최적화.
• 확산 알베도 텍스처 추출을 지원.
• 재구성된 기하학 및 조명을 Blender에 가져오는 스크립트 포함.
• NeRF, NeRD, NeRFactor 데이터셋의 결과를 재현하기 위한 설정 제공.