wassermanproductions/motion-previs-studio

Open-source desktop app for AI-film motion, depth, pose, and camera-move previsualization.uggested Donation of $30 if you you can to help me keep making these tools.https://ko-fi.com/samwasserman

解決的問題

Motion Previs Studio 是為需要對 AI 生成影片進行精確控制的電影製作人設計的。它不依賴隨機生成,而是允許使用者從參考影片中提取特定的動作、姿勢與相機資料,建立「製作套件」,以引導後續的 AI 影片工具(如 Runway、Kling 或 ComfyUI)維持一致的動作與佈局。

工作原理

該應用處理來源影片(本機檔案或 YouTube 連結),並分析以提取多個控制層。它使用 MediaPipe Pose Landmarker 進行身體追蹤,並結合 Lucas-Kanade 光流與 RANSAC 相似性擬合,獨立於主體求解相機運動。隨後,該工具將這些資料編碼為決定性影片與 JSON 資料,可匯出為用於 AI 流水線的套件,或匯入 Blender。

適用對象

專為希望超越簡單提示詞、使用基於參考的控制來實現演員動作、相機路徑與場景深度的 AI 電影製作人與預視覺化藝術家打造。

主要亮點

  • 全面的控制層:提取 OpenPose BODY_25 骨骼、深度圖、邊緣、遮罩與相機運動資料。
  • 與主體無關的相機解算:在遮蔽追蹤主體的同時,恢復背景的相機運動(平移/俯仰/縮放/旋轉)。
  • 智慧代理控制:包含 MCP 橋接,允許 AI 代理(如 Claude Code)驅動應用的分析與匯出工作流程。
  • 生產就緒的匯出:產生包含 JSON 清單、Blender 導入用 Python 指令碼以及 ControlNet 圖形格式化影片的「製作套件」。
  • 跨平台支援:支援 macOS 與 Windows 11。

相關

  • 專案
  • 專案
  • 專案
  • 專案