habitat-sim: エンボディードAI研究向けの高性能物理対応3Dシミュレータ

解決する課題

Habitat‑Sim は、エンボディードAI研究のために設計された高性能3Dシミュレータです。エージェントがリアルな屋内外空間で訓練・テストできる、遅いレンダリングや複雑なセットアップの負荷がない高速・物理対応環境の必要性を解決します。

仕組み

実世界空間の3DスキャンやオブジェクトのCADモデルをサポートするシミュレーションエンジンを提供します。剛体力学には Bullet Physics を統合し、RGB‑D カメラやエゴモーションセンシングなどの設定可能なセンサーをサポートします。シミュレータは極限の速度を追求して最適化されており、フレームレート（FPS）とステップレート（SPS）を重視し、AI 訓練の迅速なイテレーションを可能にします。

対象ユーザー

主にエンボディードAIに取り組む研究者や開発者向けです。特に、ナビゲーション、指示に従うタスク、強化学習や模倣学習による質問応答などのタスクでエージェントを訓練する人々を対象としています。

ハイライト

• 極限のパフォーマンス: 単一GPUで数千フレーム/秒のレンダリングが可能。
• 幅広いデータセットサポート: HM3D、HSSD、Matterport3D、Gibson、Replica など主要な3Dデータセットを標準でサポート。
• 物理統合: Bullet Physics による剛体力学と関節動力学をサポート。
• ロボットの汎用性: URDF で記述された様々なロボット構成（モバイルマニピュレータ、固定ベースアーム、クアドロペッドなど）をサポート。