microsoft/DCVC

解決的問題

DCVC-UF 解決了神經影片編解碼器 (NVC) 計算複雜度高的問題，這通常使其難以在實際場景中部署。其目標是在實現極快編解碼速度的同時，提供高壓縮比。

工作原理

該專案實現了一個基於分塊的編碼框架。它不是順序處理幀，而是將包含多個幀的分塊編碼為單個緊湊的潛在表示，並同時進行解碼。這由以下技術支持：

• Cross-frame interaction modules：用於聯合時空建模。
• Frame-specific decoders：實現幀的並行重建。
• Streamlined entropy coding：一種透過將位元流交互整合到單一步驟中來減少解碼開銷的機制。

適用對象

從事影片壓縮、神經影片編解碼器和高性能影片處理流水線研究的科研人員與開發人員。

亮點

• 超高速：在編解碼吞吐量方面顯著優於以往領先的編解碼器。
• 寬位元率範圍：具有 64 個 QP 級別的單一模型允許進行細粒度的位元率調整。
• 多功能色彩空間：支援 YUV420 與 RGB 內容編碼。
• 高效率：在保持高品質的同時，實現了相對於 VTM-17.0 的位元率降低。