mosaico-labs/mosaico
Mosaico - The data platform for Physical AI
解決する課題
Mosaicoは、ロボティクスおよびPhysical AIにおけるデータの管理と取得の難しさに対応します。クエリが困難で、現代のAIモデルのトレーニングに必要な高密度かつ同期されたテンソル形式と互換性のない、モノリシックで非同期なセンサーログ(ROS bagsなど)の問題を解決します。
仕組み
本プラットフォームは、Rustベースのバックエンドデーモン (mosaicod) とPython SDKからなるクライアント・サーバーアーキテクチャを採用しています。ゼロコピーアーキテクチャを使用して、生のセンサーデータを構造化されたクエリ可能なアーカイブに変換し、ファイル全体をパースすることなく信号への直接的なランダムアクセスを可能にします。システムは、意味的な理解を保証するために厳密に型付けされたデータオントロジーを採用し、決定論的なデータリネージを維持するために不変のデータレイヤーを使用します。
対象ユーザー
イベント駆動型の古典的なロボティクスデータから、Physical AIのモデルトレーニングに必要な同期された表形式のデータへの移行が必要な、ロボットエンジニアおよびAI研究者。
関連
- プロジェクト
dora-rs/doraレイテンシを最小限に抑えるためにゼロコピー共有メモリとApache Arrowを使用する、リアルタイムロボティクスおよびAIアプリケーション向けの高性能なRustベースのフレームワーク。
- プロジェクト
mosecorg/mosecMosecは、RustベースでPythonフレンドリーなモデルサービングフレームワークであり、動的バッチ処理、多段階パイプライン、組み込みメトリクスを提供します。pip/condaでインストールし、Workerサブクラスのforwardメソッドを定義してServerを起動するだけで、あらゆるMLモデル(Stable Diffusionなど)を高速なHTTP APIとして公開できます。
- プロジェクト
foxglove/foxglove-sdkストリーミングまたは MCAP ファイルを介してマルチモーダルロボティクスデータをログ記録・可視化するためのライブラリ群。Python、C++、Rust、ROS をサポート。
- プロジェクト
OpenDCAI/DataFlowDataFlowは、LLMトレーニングデータの生成、クリーニング、評価用の低コードパイプラインを構築・実行・共有できるオープンソースのPythonフレームワークです。再利用可能なオペレーターのライブラリ、視覚的なWebUI、自動パイプライン作成を支援するAIアシスタント、およびRayベースの分散実行レイヤーを提供しています。
- プロジェクト
airbnb/chrononAI/ML向けのデータプラットフォームで、データ計算と提供を抽象化し、オフライン学習データとオンラインリアルタイム特徴提供の時系列的一貫性を保証します。