KnowClip-ai/knowclip

把直播、课程、演讲、口播等长视频自动切成精彩片段|本地语音识别,音频不出本机;LLM 挑高光,批量导出

解決する課題

KnowClipは、長尺動画(講義、インタビュー、ポッドキャスト、ライブ配信など)をソーシャルメディア向けの短く魅力的なクリップに変換するプロセスを自動化します。何時間もの映像をスクラブしてハイライトシーンを探し、手動で切り出す手間を省きます。

仕組み

このツールは4つのステップで構成されています:

  1. ローカルASR:Paraformer-largeモデルを使用してデバイス上で自動音声認識を行い、単語レベルのタイムスタンプ付きのトランスクリプトを生成します。
  2. LLM分析:トランスクリプトをLLM(ユーザーが提供するOpenAI互換のAPIキー経由)に送信し、タイトル、説明、ハッシュタグを含む最も魅力的なセグメントを特定します。
  3. プレビュー:ユーザーは提案されたハイライトセグメントをカード形式で確認できます。
  4. 一括エクスポート:選択したクリップは ffmpeg -c copy(ストリームコピー)を使用してエクスポートされるため、再エンコードなしでほぼ瞬時にエクスポート可能です。

対象ユーザー

プライバシーを保護しつつ低コストで、長尺動画から素早くハイライトを抽出したいコンテンツクリエイター、教育者、ポッドキャスター。

特徴

  • プライバシー重視:動画素材とASR処理はすべてローカルマシン上で行われます。
  • 低コスト:サブスクリプション料金は不要。ユーザーは自身のLLM API利用料のみを支払います。
  • 高速:ストリームコピーを使用し、ミリ秒単位でのクリップエクスポートを実現。
  • 柔軟なLLM統合:DeepSeek、Kimi、GLM、OpenAIを含む、あらゆるOpenAI互換APIをサポート。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト