realsee-developer/RealSee3D
RealSee3D: A multi-view RGB-D dataset combining real-world captures and procedurally generated scenes, with extensible annotations for diverse 3D vision research.
解決する課題
屋内環境の膨大な高品質データセットを提供し、研究者が3D再構成、深度推定、および屋内空間のセマンティック理解のためのAIモデルを訓練・テストすることを支援します。
仕組み
Realsee3Dは、3D LiDARカメラでキャプチャされた1,000の現実世界の住宅シーンと、デザイナーが厳選したテンプレートに基づく9,000のプロシージャル生成シーンを組み合わせています。このデータセットには、マルチビューRGB-Dパノラマ画像、カメラの外部パラメータ、およびピクセル単位のセマンティックセグメンテーションマップが含まれており、約100,000の部屋にわたる完全なルームレベルのカバレッジを提供します。
対象者
屋内3Dシーン再構成、パノラマ画像解析、および空間AIに取り組むコンピュータビジョン研究者およびAIエンジニア。
関連
- プロジェクト
LiteReality/LiteRealityLiteRealityは、モバイルデバイスからのRGB-Dスキャンを、物理ベースレンダリング（PBR）マテリアルを備えたグラフィックス対応3Dシーンに変換するシステムで、高精細な再構築を実現します。
- プロジェクト
LiteReality/LiteReality-AgentLiteReality-Agentは、スマートフォンで撮影したRGB-Dスキャン（LiteReality iOSアプリ経由）を、完全にアーティキュレートされた物理演算対応の3D室内シーンに変換するオープンソースのパイプラインです。レイアウトのクリーンアップ、オブジェクトパーツの推論、質量・慣性の割り当て、LLM駆動の画像APIによるテクスチャ生成を行い、MuJoCo URDF/MJCF、Blender、またはGLB形式でエクスポートします。負荷の高いAIモデルはModalの無料GPUサービス上で実行されるため、Appleシリコン搭載のMacでも使用可能です。uvベースの環境設定後、1つのCLIコマンド（uv run litereality run <scan>）で再構築プロセス全体を実行できます。
- プロジェクト
nv-tlabs/NKSRNeural Kernel Surface Reconstruction (NKSR) は、数百万点を秒単位で処理できる、大規模で疎でノイズの多い点群から高品質な3D陰関数表面を生成する手法です。
- プロジェクト
VisionDepth/VisionDepth3DVisionDepth 3D は、AI 深度モデル、深度マップのブレンド、RIFE フレーム補間、AI 超解像度を使用して、2D 画像または動画を立体 3D に変換する Windows デスクトップアプリです。無料ティア（長さ制限あり、1080p、透かし入り）と、59.99ドルの買い切り Pro ティア（制限なし、4K+、バッチ処理、高度なコントロール）を提供しています。インストールは、CUDA (NVIDIA) または DirectML (AMD/Intel) ビルドを提供する Itch.io の「Setup Hub」を経由して行います。ソフトウェアはプロプライエタリですが、ダウンロードされる AI モデルはそれぞれのライセンスの下でオープンソースとして提供されています。
- プロジェクト