zju3dv/InfiniSplat

InfiniSplat v1 & v2: Feed-Forward 3D Gaussian Reconstruction

해결하는 문제

InfiniSplat는 이미지에서 3D 가우시안 장면을 재구성하는 피드포워드 방식을 제공하여 새로운 시점 렌더링을 가능하게 합니다. 제한된 시각 데이터에서 3D 표현을 만드는 문제를 해결하며, 단일 이미지 및 다중 이미지 입력을 모두 지원합니다.

작동 방식

프로젝트는 두 가지 버전으로 나뉩니다.

  • v1: 단안 시점 합성에 중점을 두고, 단일 RGB 이미지(선택적으로 LiDAR 깊이 지원)에서 3D 장면을 재구성합니다.
  • v2: 보정되었거나 보정되지 않은 카메라 포즈를 사용하여 여러 겹치는 이미지에서 3D 가우시안 장면을 재구성합니다.

대상 사용자

3D 재구성, 컴퓨터 비전, 새로운 시점 합성 분야의 연구자와 개발자.

주요 특징

  • 피드포워드 재구성: 장면별 최적화 없이 이미지에서 3D 가우시안을 빠르게 생성합니다.
  • 유연한 입력: 단일 RGB 이미지(v1) 또는 여러 겹치는 이미지(v2)를 지원합니다.
  • 깊이 통합: v1은 LiDAR 데이터를 사용한 깊이 센서 기반 재구성을 허용합니다.
  • 다중 시점 지원: v2는 카메라 보정 유무에 관계없이 여러 시점을 처리합니다.

관련

  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트