morphik-org/morphik-core

Open-source multimodal retrieval engine (Morphik Core). By Morphik — AI back office for skilled nursing & senior living (morphik.ai).

解決する課題

Morphik Coreは、視覚的に豊かなドキュメントを扱う際に従来のRAG（Retrieval-Augmented Generation）パイプラインが直面する課題を解決します。標準的なテキストベースの抽出では、チャート、図解、表の意味が損なわれることが多く、AIアプリケーションがドキュメント内の空間的関係や視覚的データを「見る」ことも理解することもできず、誤った回答を生成する原因となります。

仕組み

開発者が非構造化データをインジェスト、変換、検索できるようにするマルチモーダル検索エンジンとして機能します。OCRとテキスト埋め込みの断片的なパイプラインに頼るのではなく、ColPaliのような技術を使用して、単一のエンドポイントを通じてPDF、画像、ビデオ全体の視覚的コンテンツを理解する検索を可能にします。また、分類やバウンディングボックスを含む、高速なメタデータ抽出のためのツールも提供します。

対象者

複数の抽出・検索ツールを手動で組み合わせることなく、マルチモーダルなドキュメントから複雑で微妙なコンテキストを統合する必要があるAIアプリケーションを構築している開発者。

ハイライト

  • マルチモーダル検索: ColPaliを使用して、視覚的理解に基づき画像、PDF、ビデオを横断して検索します。
  • メタデータ抽出: ドキュメントからのラベル付け、分類、およびバウンディングボックスの抽出が可能です。
  • 柔軟なアクセス: Python SDK、REST API、ウェブベースのMorphik Console、およびModel Context Protocol (MCP) を通じて利用可能です。
  • 幅広い統合: Google Suite、Slack、Confluenceなどのツールと連携します。