MartinDelophy/ai-video-editor

何を解決するか

Timeline Studio は、AI 機能をマルチトラックタイムラインに直接統合した、ローカルファーストのブラウザベースの動画編集ツールです。AI 処理のためにプロジェクトメディアをバックエンドにアップロードする必要がなく、プライバシーを確保しつつ遅延を低減し、プロフェッショナルな編集ツールを提供します。

動作方法

エディタは WebGPU と WASM を使用してブラウザ内でローカル推論を実行します。音楽生成や音声認識には ONNX モデルを活用し、MP4/WebM の合成には WebCodecs を使用します。モデルは遅延読み込みされ、サービスワーカーでキャッシュされ、Hugging Face と ModelScope にミラーが用意されており、可用性を確保します。また、.timeline プロジェクトファイル上で AI エージェントが編集計画を立てて実行できるヘッドレスコマンドランナーも搭載しています。

対象ユーザー

CapCut に似た編集体験を求めるコンテンツクリエイターおよび開発者向けに設計されており、ローカルで実行される AI ツール（会話するアバター、自動字幕など）を統合しています。

特徴

• ローカル AI セット: 多言語音声合成、Stable Audio 3 による音楽生成、Whisper による自動字幕、MI-GAN による透かし除去を含む。
• 視覚 AI ツール: YOLOS によるスマートフレーミング、MODNet による背景除去、LivePortrait によるデジタル人間アニメーションを搭載。
• プロフェッショナルなタイムライン: マルチトラック編集、キーフレーム、4方向カラーグレーディング、リップル編集をサポート。
• エージェント対応: LLM エージェントが動画プロジェクトをプログラムで検査・編集できる専用の「AI 動画編集スキル」を提供。
• プライバシー重視: ローカルファーストの推論により、AI ワークフロー中もメディアはユーザーのマシン上に留まります。