unitycatalog/unitycatalog

何を解決するか

Unity Catalog は、データと AI アセットを管理するためのユニバーサルでオープンソースのカタログを提供します。フォーマットやコンピューティングエンジンの違いに関係なく、単一のインターフェースでテーブルデータ、非構造化アセット、AIモデルを統合的に管理・保護できるため、ガバナンスの断片化という課題を解決します。

動作方法

マルチモーダルインターフェースとして動作し、OpenAPI仕様のオープンAPIとOSS実装を備えています。Delta Lake、Apache Iceberg、Apache Hudi、Parquet、JSON、CSVなど複数のフォーマットをサポートしており、Apache HiveのメタストアAPIおよびApache IcebergのRESTカタログAPIと互換性があります。これにより、さまざまなコンピューティングエンジンがUnityでカタログ化されたデータを読み取り、管理できます。

対象ユーザー

データエンジニア、AI実践者、および異なるツールやエンジン間でデータとAIアセットを統一的に管理・保護したい組織向けです。

主な特徴

• マルチモーダル対応: テーブル、ファイル、関数、AIモデルを管理可能。
• ユニバーサル互換性: 複数のデータフォーマットおよび主要なコンピューティングエンジンと連携可能。
• エンジン間ガバナンス: 構造化データと非構造化データ、AIアセットの統合ガバナンスを提供。
• オープンスタンダード: OpenAPI仕様に基づき、LF AI & Data Foundationがホストしています。