MartinDelophy/ai-video-editor

解決する課題

Timeline Studioは、プロフェッショナルグレードの編集ツール（マルチトラックタイムラインなど）と統合されたAI機能を備えた、ローカルファーストかつブラウザベースのAI動画エディタです。プロジェクトのメディアをバックエンドにアップロードする必要がなく、WebGPUとWASMを使用してブラウザ上で直接、複雑なAI駆動の編集、ナレーション、修復を行うことができます。

仕組み

このエディタは、CapCutスタイルのマルチトラックタイムラインを使用して視覚および音声の管理を行います。WebGPUとONNX Runtimeを活用し、ブラウザ上でAIモデルをローカル実行します。モデルは、Hugging FaceやModelScopeのミラーからService Workerを介して遅延読み込みおよびキャッシュされます。エクスポートには、WebCodecsを使用したMP4/WebM合成による決定論的なオフラインレンダリングパスを使用します。

対象ユーザー

従来のタイムライン編集とAIによる自動化や素材生成を組み合わせた、プライバシー重視のローカルファーストなAI編集スイートを求めるコンテンツクリエイターや動画編集者。

ハイライト

• ローカルAIスイート： 多言語TTS (Hojo, Kokoro, Piper)、ローカルAI音楽生成 (Stable Audio 3)、自動字幕生成 (Whisper) を搭載。
• AI動画ツール： 透かしやオブジェクト除去のためのMI-GAN、4倍の修復を行うNanoVSR、再ライティングのためのデプス（深度）マップ生成機能を搭載。
• ビジュアルインテリジェンス： スマートフレーミング、背景除去、被写体検出のためのYOLOSおよびMODNet。
• デジタルヒューマン生成： JoyVASAおよびLivePortraitによるオーディオ・トゥ・モーションおよびニューラルレンダリング。
• エージェント編集： LLMエージェント（Claude Code, Copilotなど）がヘッドレスコマンドランナーやWebMCP統合を通じて編集を計画・実行するための専用の「AI動画編集スキル」を搭載。