jasongzy/Make-It-Animatable

解決的問題

Make-It-Animatable (MIA) 提供了一個高效的框架，用於創建可動畫化的3D角色。它自動化了傳統上由3D藝術家手動完成的綁定（建立骨骼結構與分配蒙皮權重，即網格的哪些部分會隨著哪個骨骼移動）過程。

工作原理

該框架使用神經網絡預測動畫所需的關鍵組件：關節位置、蒙皮權重和姿勢。在最新版本（v2）中，它利用 Hunyuan3D 2.1 ShapeVAE 作為骨幹網絡來處理網格輸入，並預測這些動畫參數。系統可透過 Mixamo 等數據集進行訓練，學習如何將3D形狀映射到骨骼結構。

適用對象

需要快速將靜態3D網格轉換為可使用標準骨骼動畫流程進行動畫的角色的3D藝術家、遊戲開發者以及電腦視覺和圖形學領域的研究人員。

主要亮點

• 自動綁定：直接從3D網格輸入預測關節和蒙皮權重。
• Blender 集成：包含用於在 Blender 中後處理和恢復全域變換的工具。
• 泛化能力：在多樣化的數據集（包括 3DBiCar 數據集）上訓練，可處理具有異常體型比例的角色。
• 高效訓練：支援分別訓練權重、骨骼和姿勢，以優化顯存使用並提升靈活性。