MrNeRF/LichtFeld-Studio

해결하는 문제

LichtFeld Studio는 전체 3D 가우시안 스플래팅(3DGS) 워크플로우를 위한 통합된 네이티브 애플리케이션을 제공합니다. 별도의 훈련 스크립트, 독립형 뷰어, 편집 도구를 전환할 필요 없이 하나의 모듈식 워크스테이션으로 결합합니다.

작동 방식

이 애플리케이션은 최신 C++23 및 CUDA 12.8+를 사용하여 NVIDIA GPU에서 고성능 훈련과 실시간 시각화를 제공합니다. 사용자는 COLMAP 데이터셋을 로드하고, 새로운 장면을 훈련하고, 체크포인트에서 재개하고, 가우시안 하위 집합을 대화식으로 편집할 수 있습니다. 시스템은 Python 플러그인 시스템을 통해 확장 가능하며, 임베디드 Python 및 MCP(Model Context Protocol) 리소스와 도구를 통해 자동화할 수 있습니다.

대상 사용자

• 연구자: 재구성 품질을 반복적으로 개선하고 MCMC 최적화와 같은 고급 기능을 테스트해야 하는 사람.
• 프로덕션 팀: PLY, SOG 또는 SPZ와 같은 형식으로 내보내기 전에 장면을 시각적으로 검사하고 편집해야 하는 팀.
• 도구 개발자: 플러그인 및 플러그인-로컬 종속성을 통해 3DGS 워크플로우를 더 큰 파이프라인에 통합하려는 사람.

주요 기능

• 통합 워크플로우: 훈련, 실시간 검사, 편집을 하나의 도구로 결합.
• 확장성: 사용자 정의 패널 및 연산자를 위한 Python 플러그인 지원.
• 자동화: MCP를 통해 로컬 도구 및 에이전트와 통합.
• 연구 기능: MCMC 최적화, 양자화 그리드 외관 모델링, 3DGUT 지원 포함.
• 휴대용 내보내기: 다양한 형식 또는 독립형 HTML 뷰어로 결과 내보내기.

요약

3D 가우시안 스플래팅을 위한 모듈식 워크스테이션으로, 훈련, 실시간 시각화, 편집 및 자동화를 단일 네이티브 애플리케이션에 통합합니다.

제목

3D 가우시안 스플래팅 장면을 훈련, 편집 및 자동화하기 위한 모듈식 워크스테이션