unitycatalog/unitycatalog

何を解決するか

Unity Catalog は、データと AI アセットを管理するためのユニバーサルでオープンソースのカタログを提供します。フォーマットやコンピューティングエンジンにかかわらず、ユーザーが一元的なインターフェースでテーブルデータ、非構造化アセット、AIモデルを安全に管理・統治できるようにすることで、分散したガバナンスの問題を解決します。

動作方法

OpenAPI仕様とOSS実装を備えたマルチモーダルインターフェースとして動作します。Delta Lake、Apache Iceberg、Apache Hudi、Parquet、JSON、CSVなど複数のデータフォーマットをサポートし、Apache HiveのメタストアAPIおよびApache IcebergのRESTカタログAPIと互換性があります。これにより、さまざまなコンピューティングエンジンがカタログ化されたデータを読み取り、管理できます。

対象ユーザー

データエンジニア、AI実践者、および異なるツールやエンジン間で多様なデータとAIアセットを統一的にガバナンス・セキュリティ化したい組織に適しています。

特徴

• ユニバーサルガバナンス: テーブル、ファイル、関数、AIモデルを一元的に管理できるインターフェース。
• マルチモーダル対応: Delta Lake、Iceberg、Hudiなど任意のフォーマットおよび任意のコンピューティングエンジンに対応する拡張性。
• オープンスタンダード: OpenAPI仕様に基づき、LF AI & Data Foundationがホストしています。
• 広範なエコシステム: AWS、Google Cloud、Microsoft Azure、NVIDIAを含む多数の業界パートナーが支援しています。