apple-aiml-research/ARKitScenes

何を解決するか

モバイルLiDARスキャナで収集された実世界の室内シーンの巨大で多様なデータセットを提供し、3Dシーン理解を向上させます。特に、専門的な機器ではなく、一般的なモバイルデバイスから取得された高品質なRGB-Dデータの必要性に応えます。

仕組み

AppleのiPad Proに搭載されたLiDARスキャナを使用してRGB-Dデータを収集します。原始データ、カメラの姿勢、表面再構築、静止型レーザースキャナからの高解像度深度マップを含みます。地面真値として、家具や部屋を定義する物体の手動ラベル付き3D方向付きバウンディングボックスを提供します。

対象ユーザー

3Dコンピュータビジョン、室内シーン理解、3Dオブジェクト検出、深度アップサンプリングに取り組む研究者および開発者。

特徴

• 同種で最大規模の室内3Dデータセット。1,661のユニークなシーンを5,047回収集。
• 一般的に入手可能なモバイルLiDARスキャナで撮影された最初のRGB-Dデータセット。
• 高解像度の地面真値深度マップと手動ラベル付き3Dバウンディングボックスを含む。
• 3Dオブジェクト検出およびRGB-Dガイド付きアップサンプリングタスク用のスクリプトとトレーニングコードを提供。