a312863063/Video-Auto-Wipe
Erase specific content from the video that you don't wanna see
解決的問題
本專案提供一種自動移除影片中不需要的固定模式內容(如字幕、圖示、動態圖示)的方法,並填補缺失區域以恢復影片外觀。
工作原理
系統採用兩階段訓練流程。首先,透過時間感知訓練幫助模型識別前景元素(需擦除的內容)。隨後將此資訊整合至擦除模型中,進行端對端微調。
針對不同類型的內容,使用不同的檢測方法:
- 字幕:透過識別具有穩定文字樣式的區域來檢測。
- 圖示:透過檢測在時間上保持靜止的像素區塊來識別。
- 動態圖示:透過檢測閃爍或動態移動的固定像素區塊來識別。
適用對象
希望無需手動遮罩即可清理影片中干擾性覆疊層、字幕或水印的使用者。
主要亮點
- 自動檢測:自動感知字幕和圖示的位置,無需手動輸入。
- 時間一致性:利用時間搜尋與補全能力,恢復細節與無文字區域。
- 自訂訓練資料:基於包含超過 3,000 個電影與綜藝節目片段的合成前景覆疊資料集建構。
相關
- 專案
- 專案
- 專案
- 專案