HongwenZhang/PyMAF
[ICCV 2021, Oral] PyMAF: 3D Human Pose and Shape Regression with Pyramidal Mesh Alignment Feedback Loop
解決的問題
PyMAF 和 PyMAF-X 解決了從單張單眼影像或影片中精確回歸 3D 人體姿勢與形狀的挑戰。它們旨在提高重建的 3D 人體網格與 2D 影像輸入之間的對齊度與精度,其中 PyMAF-X 特別專注於全身模型回歸。
運作原理
該專案利用金字塔網格對齊反饋迴路 (Pyramidal Mesh Alignment Feedback Loop) 來優化 3D 人體網格。它利用 SMPL 和 SMPL-X 人體模型來表示人體的形狀與姿勢。該系統可以處理靜態影像與影片(支援單人或多人),並使用預訓練模型將影像特徵映射到 3D 網格參數。
適用對象
此工具專為從事電腦視覺、3D 人體重建以及人體姿勢估計的研究人員與開發者所設計。
特色亮點
- 全身支援:PyMAF-X 將能力擴展至對齊良好的全身模型回歸。
- 多樣化輸入:支援影像與影片輸入,包括包含多人的場景。
- 高效能:在 AGORA Test (SMPL-X Whole-Body) 排行榜上排名第二。
- 反饋迴路:採用金字塔網格對齊策略以提高重建準確度。
相關
- 專案
- 專案
- 專案
- 專案