apache/systemds
An open source ML system for the end-to-end data science lifecycle
解決する課題
Apache SystemDSは、初期のデータ準備とクリーニングから、モデルのトレーニング、デバッグ、サービングに至るまで、データサイエンスのライフサイクル全体を処理できるように設計されています。
仕組み
ユーザーは、Rに似た構文を持つ高レベル言語、またはPythonおよびJava APIを使用して、MLアルゴリズムやパイプラインを指定します。システムは、ローカルのインメモリ操作とApache Spark上の分散操作を組み合わせたハイブリッド実行プランを自動的に生成します。また、GPUや連合学習のための追加のバックエンドもサポートしています。
対象者
エンドツーエンドの機械学習パイプラインのためのスケーラブルなシステムを必要とするデータサイエンティストや開発者向けに構築されています。
ハイライト
- エンドツーエンドのデータサイエンスライフサイクルのサポート
- ハイブリッド実行プラン（ローカルおよびApache Spark分散）
- Rに似た構文とPython/Java API
- GPUおよび連合学習バックエンドのサポート
関連
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト