nvidia-isaac/nvblox

A GPU-accelerated TSDF and ESDF library for robots equipped with RGB-D cameras.

解決する課題

nvbloxは、ロボティクスにおけるリアルタイム3Dシーン再構築のための高性能なソリューションを提供します。ロボットが周囲の環境を3Dでマッピングできるようにし、幾何学的な理解と複雑な環境下での効果的なナビゲーションを可能にします。

仕組み

このライブラリは、NVIDIA CUDAハードウェアを使用してGPU上で直接3D再構築を実行します。空間データ構造をリアルタイムで構築、操作、クエリすることで、テクスチャマッピングや経路計画のためのユークリッド符号付き距離場 (ESDFs) の生成といったタスクを実現します。

対象ユーザー

自律システム向けに効率的でリアルタイムな空間認識を必要とするロボティクス開発者や研究者向けに設計されています。C++, Python, ROS2 を介した統合をサポートしています。

ハイライト

  • NVIDIA GPU向けに最適化されたリアルタイム3D再構築
  • 複数のインターフェースをサポート：C++, Python, ROS2
  • ナビゲーションおよび経路計画のための ESDFs 生成が可能
  • マルチカメラ再構築やテクスチャマッピングなどの複雑なタスクに対応

関連

  • プロジェクト
    loco-3d/crocoddyl

    接触シーケンス下でのロボット制御向けの最適制御ライブラリ。効率的な微分動的計画法（DDP）アルゴリズムを使用して最適な軌道を計算します。

  • プロジェクト
    thu-ml/Motus

    Motus は、5 B のビデオ生成モデル、2 B の視覚言語モデル、および 2 つの小型エキスパートを組み合わせた、Mixture-of-Transformers ワールドモデルを備えた研究グレードのコードベースです。オプティカルフローの「デルタピクセル」から潜在ロボットアクションを学習し、複数のモード（ワールドモデル予測、VLA、逆動力学、ビデオ生成）で実行できます。リポジトリには、3 段階のトレーニングスクリプト、RoboTwin 2.0 および実ロボットログ用のデータ変換ツール、Hugging Face チェックポイントが含まれています。RoboTwin 2.0 ベンチマークでは、87% の成功率を報告しており、以前のベースラインを上回っています。

  • プロジェクト
    neozhaoliang/surround-view-system-introduction

    カメラキャリブレーション、地面投影、画像スティッチング、リアルタイム表示を網羅した、初心者向けのオープンソース車両用サラウンドビューシステム実装。詳細な中英ドキュメント、サンプルデータを含み、コミュニティからの貢献を歓迎します。

  • プロジェクト
    mjbots/moteus

    ロボティクスで使用される高パフォーマンスのブラシレスサーボアクチュエータ用の、ハードウェアおよびファームウェアの完全なオープンソース設計を提供するプロジェクト。