Hugging Face と IBM の watsonx.ai パートナーシップ

Hugging Face と IBM は提携し、Hugging Face のオープンソースライブラリとモデルを watsonx.ai に統合しました。watsonx.ai は、従来の機械学習と生成 AI の両方の機能をトレーニング、検証、チューニング、デプロイするために設計されたエンタープライズ AI スタジオです。このコラボレーションにより、エンタープライズユーザーは、クラウドとオンプレミスの両方のデプロイをサポートする管理環境内で、膨大な事前学習モデルとコミュニティ主導ツールのエコシステムを活用できるようになります。

エンタープライズ AI の要件と標準化の役割

エンタープライズ AI の導入は、単一の汎用モデルではなく、特定の企業データや計算予算に合わせた専門的なモデルが必要とされることから推進されています。大規模組織では、さまざまな事業部門にわたって数百から数千のモデルを展開する必要があり、プロジェクトごとにインフラをゼロから構築しないよう、トレーニングとデプロイの標準化が求められます。

標準化は主に次の 3 つの要因によって促進されます。

• Model Architecture（モデルアーキテクチャ）: Transformer アーキテクチャは、自然言語処理、コンピュータビジョン、音声/スピーチといったディープラーニングアプリケーションの事実上の標準となっています。
• Pre-trained Models（事前学習モデル）: 数十万に及ぶ事前学習モデルへのアクセスにより、開発者は有望な候補を迅速に絞り込むことができます。
• Open-source Libraries（オープンソースライブラリ）: コミュニティ主導のツールにより、1 行のコードでモデルのダウンロードと実験が可能となり、ローカル開発から本番環境までの一貫性が保たれます。

watsonx.ai の技術統合

watsonx.ai は RedHat OpenShift 上に構築されており、クラウドとオンプレミスの両方で利用可能です。これにより、厳格なコンプライアンス要件を持つ組織や、機密データを自社インフラに保持したい組織にとって、ゼロから社内 ML プラットフォームを構築する必要がなくなる重要な代替手段が提供されます。

技術的には、watsonx.ai は以下の主要な Hugging Face オープンソースライブラリを統合して基盤機能を実現しています。

• transformers: 事前学習モデルのダウンロードと利用のための主要ライブラリ。
• accelerate: ハードウェアとトレーニングパフォーマンスの最適化。
• e
• Text Generation Inference (TGI): 最適化されたモデルデプロイ用サーバー。

AI ビルダーへの戦略的インパクト

このパートナーシップにより、Hugging Face の顧客は IBM プラットフォーム内でモデルとデータセットをネイティブに扱えるようになります。さらに、IBM は独自の大規模言語モデル（LLM）コレクションを開発中で、これらはオープンソース化され Hugging Face Hub で提供される予定です。これにより、広範な AI コミュニティ向けに利用可能な基盤モデルのプールが拡大します。