showlab/Code2Video
[ICML 2026] Video generation via code
解決的問題
Code2Video 解決了製作高品質、一致且可重現的教育影片的困難。與傳統的文本轉影片模型直接生成像素不同,此框架使用可執行的程式碼作為影片生成的媒介,確保清晰度與精確性。
工作原理
該系統採用以代理為中心、以程式碼為導向的架構,利用 Manim 套件生成影片。採用模組化的三代理設計:
- 規劃者:將知識點擴展為詳細的分鏡腳本。
- 程式設計者:合成可除錯的 Manim 程式碼以實現分鏡腳本。
- 評論者:使用錨點與視覺反饋優化版面與美學。
為提升視覺品質,框架可透過 IconFinder API 集成外部圖示。整個流程透過 MMMC 基準進行評估,該基準測試知識轉移、美學品質與效率。
適用對象
此工具專為教育工作者、內容創作者與研究人員設計,旨在自動化生成類似 3Blue1Brown 所製作的數學或技術上精確的教育動畫。
主要特色
- 程式碼驅動生成:使用可執行的 Manim 程式碼,而非基於像素的生成,以實現更高的連貫性與可重現性。
- 三代理架構:分離規劃、編碼與評估,確保輸出結構化且精煉。
- MMMC 基準:包含 117 個學習主題的專用基準,用於評估教育影片生成效果。
- 多維度評估:根據知識轉移(TeachQuiz)、美學品質與計算效率對影片進行綜合評估。
相關
- 專案
- 專案
- 專案
- 專案
- 專案