octimot/StoryToolkitAI

解決する課題

StoryToolkitAIは、映画編集プロセスにおける大量のビデオ素材を手動で検索・整理する非効率性を解決します。AIを使用してコンテンツを文字起こしし、インデックス化することで、退屈な手動ロギングの必要性を排除し、特定の瞬間を見つけたりストーリーを組み立てたりすることを容易にします。

仕組み

このツールは、ユーザーのローカルマシン上で動作し、オーディオの文字起こしとビデオコンテンツのインデックス作成を行います。OpenAI、Ollama、vLLM、LM Studioなどのプロバイダーを介した大規模言語モデル（LLM）を使用することで、ユーザーがコンテンツとチャットしたり、アイデアを生成したり、ストーリーのセレクションを自動作成したりすることを可能にします。これらのセレクションは、EDLまたはXMLファイルとして書き出してプロフェッショナルな編集ソフトで使用でき、DaVinci Resolve Studio 18+向けには特定のディープインテグレーションが利用可能です。

対象者

AIを使用してトランスクリプトを管理し、直感的に素材を検索し、ストーリーのためのクリップの初期選択を自動化することで、ワークフローを加速させたい映画制作者やビデオエディター向けに設計されています。

ハイライト

• ローカル処理: プライバシーとコストのために、ローカルマシンで無料の自動文字起こし、英語への翻訳、およびインデックス作成を実行します。
• AIによるストーリーテリング: インデックス化された素材に基づいて、LLMにストーリーやセレクションを作成させる機能。
• 編集ソフトとの連携: EDL、XML、Fountain形式への書き出しに対応。DaVinci Resolve Studio向けには高度なナビゲーションとマーカー同期を提供。
• 文字起こしツール: 自動話者検出、質問検出、およびトランスクリプト行のグループ化機能が含まれています。