smthemex/ComfyUI_FlashVSR

FlashVSR:Towards Real-Time Diffusion-Based Streaming Video Super-Resolution,you can use it in comfyUI

解決する問題

このプロジェクトは、高品質なビデオ超解像のために設計された高度な拡散ベースのフレームワークである FlashVSR および FlashVSR+ の ComfyUI 統合を提供します。ユーザーはビデオを効率的にアップスケールでき、RTX 4090 などのコンシューマーハードウェアでの 4K 解像度処理もサポートします。

仕組み

このプロジェクトは ComfyUI のカスタムノードラッパーとして機能し、ユーザーが FlashVSR モデルをロードして既存の ComfyUI ワークフロー内で実行できるようにします。Block-Sparse-Attention や Triton ベースの FlashVSR アテンションなど、複数のアテンションメカニズムをサポートし、速度とメモリ使用量のバランスを取ります。ユーザーは入力フレーム数や VAE 推論モードなどのパラメータを設定して、速度または出力品質を最適化できます。

対象ユーザー

このツールは、最先端の拡散モデルを使用して高品質なビデオアップスケーリングを実行する必要がある、ComfyUI を使用するビデオ編集者、AI アーティスト、研究者を対象としています。

ハイライト

  • ComfyUI 内でリアルタイムの拡散ベースのビデオ超解像を実現。
  • FlashVSR+ をサポートし、効率的で高品質な 4K ビデオアップスケーリングを実現。
  • VRAM 使用量を管理し、メモリ不足(OOM)エラーを防ぐための柔軟なアテンション構成を提供。
  • 処理速度と視覚的忠実度のトレードオフを可能にするさまざまな VAE モードのオプションを提供。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト