apple-aiml-research/ARKitScenes

해결하는 문제

일반적인 모바일 장치에서 수집된 고품질 RGB-D 데이터의 필요성을 충족시키기 위해, 실내 환경의 거대하고 다양한 실제 세계 데이터셋을 제공합니다. 전문 장비가 아닌 일반적인 기기에서 촬영된 데이터에 초점을 맞춥니다.

작동 방식

Apple LiDAR 스캐너를 탑재한 iPad Pro를 사용하여 RGB-D 데이터를 수집합니다. 원시 데이터, 카메라 자세, 표면 재구성, 정지형 레이저 스캐너로부터의 고해상도 깊이 맵을 포함합니다. 지상 진실(ground truth)로는 가구 및 공간을 정의하는 다양한 물체에 대한 수동 레이블링된 3D 방향 경계 상자(oriented bounding boxes)를 제공합니다.

대상 사용자

3D 컴퓨터 비전, 실내 장면 이해, 3D 객체 탐지, 깊이 업샘플링 분야에서 연구 및 개발을 수행하는 연구자 및 개발자입니다.

주요 특징

• 유사한 종류 중 가장 큰 실내 3D 데이터셋으로, 1,661개의 고유한 장면을 5,047회 촬영했습니다.
• 일반적으로 이용 가능한 모바일 LiDAR 스캐너로 촬영된 최초의 RGB-D 데이터셋입니다.
• 고해상도 지상 진실 깊이 맵과 수동으로 레이블링된 3D 경계 상자를 포함합니다.
• 3D 객체 탐지 및 RGB-D 기반 업샘플링 작업을 위한 스크립트와 학습 코드를 제공합니다.