ruc-datalab/DeepAnalyze

何を解決するか

DeepAnalyzeは、データ準備、分析、モデリング、可視化、レポート生成などのタスクにおける人間の介入を完全に排除する、データサイエンスの全プロセスを自動化するように設計されています。特に、データベース、CSV、Excelなどの構造化データ、JSON、XML、YAMLなどの準構造化データ、およびTXT、Markdownなどの非構造化データといった多様なデータソースにおけるオープンエンドのデータ調査の課題に特化しています。

動作方法

DeepAnalyzeは、データソースを自律的に探索し、データ中心のタスクを実行できるエージェント型の大規模言語モデル（LLM）です。8Bパラメータモデル（DeepAnalyze-8B）として提供され、vLLMを介してデプロイ可能です。WebUI、JupyterUI（LLMの出力を実行可能なコードセルに変換）、CLIなど、さまざまなインターフェースをサポートしています。また、OpenAIスタイルのAPIを介してワークフローに統合することも可能です。

対象ユーザー

データサイエンティスト、研究者、アナリストで、データ分析ワークフローを自動化し、生データファイルからアナリストレベルの研究レポートを生成したい方におすすめです。

特徴

• エンドツーエンドの自動化：データ準備から最終レポート生成までをすべて処理します。
• マルチフォーマット対応：構造化、準構造化、非構造化データすべてに対応します。
• オープンソース：モデル、学習データ（DataScience-Instruct-500K）、コードがすべて完全にオープンソースです。
• 柔軟なデプロイ：WebUI、JupyterUI、CLIなど複数のインターフェースをサポートし、vLLMを用いてGPUメモリ制約に応じたさまざまな量子化オプションでデプロイ可能です。