Datayoo/HuggingFists

解決する課題

HuggingFistsは、大規模言語モデル（LLM）およびHugging Faceモデルの統合と利用を簡素化するために設計されたローコードのデータフローツールです。複雑なデータ処理パイプラインの構築に広範なコーディングを必要とせず、LangChainなどのフレームワークの視覚的な代替手段として機能します。

動作原理

ユーザーは、オペレーター（機能ブロック）をドラッグ＆ドロップし、その入力ポートと出力ポートを接続することでワークフローを構築します。システムは、データソースの接続から実行まで、これらのフローのライフサイクル全体を管理します。

• モデルアクセス: Hugging Faceモデルへのアクセスは、Inference API（クラウド）経由、またはCPUまたはGPU上にデプロイされたローカルモデルファイルへのポインタを指定することでサポートされています。
• データ管理: APIトークン、データベース接続、ファイルシステムを処理するための、集中型のアカウントおよびデータソース管理システムが含まれています。
• 実行とデバッグ: ワークフローは即座に実行するか、定期ジョブとしてスケジュールできます。プラットフォームはブレークポイントデバッグを提供し、ユーザーが特定のポートでデータ構造を検査してフローが正しいことを確認できるようにします。
• 拡張性: ユーザーは、新しいコネクタ（データソース用）とオペレーター（特定の機能用）を追加することでシステムを拡張できます。

対象ユーザー

テキスト要約、感情分析、画像分類などのAI駆動型データ処理タスクを、深い統合コードを書かずにデプロイしたいユーザーを対象としています。

ハイライト

• ビジュアルワークフローデザイナー: 実行可能なデータ処理ロジックを構築するためのドラッグ＆ドロップインターフェース。
• ハイブリッドモデルデプロイ: Hugging Face Inference APIとローカルモデル実行の両方をサポート。
• ブレークポイントデバッグ: オペレーターのポートにブレークポイントを設定してデータフローを検証する機能。
• 包括的なデータ統合: Hugging Faceデータセット、MySQL、およびさまざまなファイル形式（PDF、Word、Excelなど）のための組み込みコネクタ。