realsee-developer/RealSee3D
RealSee3D: A multi-view RGB-D dataset combining real-world captures and procedurally generated scenes, with extensible annotations for diverse 3D vision research.
해결하는 문제
연구자들이 3D 재구성, 깊이 추정 및 실내 공간의 시맨틱 이해를 위한 AI 모델을 훈련하고 테스트할 수 있도록 방대한 양의 고품질 실내 환경 데이터셋을 제공합니다.
작동 방식
Realsee3D는 3D LiDAR 카메라로 캡처된 1,000개의 실제 주거 장면과 디자이너가 큐레이션한 템플릿을 기반으로 절차적으로 생성된 9,000개의 장면을 결합합니다. 이 데이터셋에는 멀티뷰 RGB-D 파노라마 이미지, 카메라 외부 파라미터 및 픽셀 단위 시맨틱 세그멘테이션 맵이 포함되어 거의 100,000개의 방에 걸쳐 완전한 룸 레벨 커버리지를 제공합니다.
대상
실내 3D 장면 재구성, 파노라마 이미지 분석 및 공간 AI를 연구하는 컴퓨터 비전 연구자 및 AI 엔지니어.
관련
- 프로젝트
- 프로젝트
LiteReality/LiteReality-AgentLiteReality-Agent는 스마트폰으로 촬영한 RGB-D 스캔(LiteReality iOS 앱 사용)을 완전히 관절이 구현된 물리 기반 3D 실내 장면으로 변환하는 오픈소스 파이프라인입니다. 레이아웃 정리, 객체 부품 추론, 질량/관성 할당, LLM 기반 이미지 API를 통한 텍스처 생성 기능을 제공하며, MuJoCo URDF/MJCF, Blender 또는 GLB 형식으로 내보낼 수 있습니다. 무거운 AI 모델은 Modal의 무료 GPU 서비스에서 실행되므로 Apple Silicon Mac에서도 사용할 수 있습니다. uv 기반 환경 설정 후 단일 CLI 명령(uv run litereality run <scan>)으로 전체 재구성 과정을 수행합니다.
- 프로젝트
nv-tlabs/NKSRNeural Kernel Surface Reconstruction (NKSR)는 수백만 개의 점을 초당 처리할 수 있는, 대규모이고 희박하며 노이즈가 많은 점군에서 고품질의 3D 음함수 표면을 생성하는 방법입니다.
- 프로젝트
VisionDepth/VisionDepth3DVisionDepth 3D는 AI 깊이 모델, 깊이 맵 블렌딩, RIFE 프레임 보간 및 AI 초해상도를 사용하여 2D 이미지 또는 비디오를 입체 3D로 변환하는 Windows 데스크톱 앱입니다. 무료 티어(길이 제한, 1080p, 워터마크)와 일회성 $59.99 Pro 티어(제한 없음, 4K+, 일괄 처리, 고급 컨트롤)를 제공합니다. 설치는 CUDA(NVIDIA) 또는 DirectML(AMD/Intel) 빌드를 제공하는 Itch.io의 “Setup Hub”를 통해 이루어집니다. 이 소프트웨어는 독점적이지만 다운로드하는 AI 모델은 자체 라이선스에 따라 오픈 소스로 제공됩니다.
- 프로젝트