zilliztech/deep-searcher

解決する課題

DeepSearcherは、企業のプライベートデータに対する正確な検索、評価、推論を行うという課題に対処します。組織が内部ドキュメントを活用しつつデータセキュリティを維持できるようにし、汎用的なLLMの知識だけに頼る必要をなくします。

仕組み

このシステムは、大規模言語モデル（LLM）とベクトルデータベース（MilvusやZilliz Cloudなど）を組み合わせ、検索拡張生成（RAG）パイプラインを構築します。ユーザーはローカルファイルを読み込んだり、Webサイトをクロールしたりして、サポートされているさまざまな埋め込みモデルを使用してデータをベクトルに変換し、ベクトルデータベースに保存できます。クエリが実行されると、システムは関連するプライベートデータを取得し、設定されたLLMを使用して正確な回答や包括的なレポートを生成します。

対象ユーザー

このツールは、ナレッジマネジメントに注力する企業、インテリジェントなQ&Aシステムを構築する開発者、およびプライベートデータセットから高精度な情報検索を必要とするすべての方のために設計されています。

主な特徴

• 幅広いモデルサポート: OpenAI、DeepSeek、Claude、Gemini、およびOllamaを介したローカルモデルを含む、幅広いLLMと互換性があります。
• 柔軟な埋め込み: OpenAI、VoyageAI、Pymilvus組み込みモデルなど、多数の埋め込みプロバイダーをサポートしています。
• エンタープライズ対応ストレージ: MilvusおよびZilliz Cloudと統合されており、効率的なデータパーティショニングと検索が可能です。
• ハイブリッドデータ読み込み: ローカルファイルからのデータ読み込みをサポートし、Webクロール機能も統合されています。