ant-research/4DAnyone

解決的問題

4DAnyone 將單一隨意的單目影片轉換為多視角影片。這解決了需要昂貴的多相機陣列來捕捉 4D（3D + 時間）人體重構的問題，讓使用者能從簡單的肖像影片生成密集的目標視角。

工作原理

該系統接收一個人的肖像影片（720p 或更高解析度），並生成該人物在不同相機配置下的多個合成視角。使用者可指定每層的視角數量、不同高度層級的俯仰角，以及水平方向的偏航範圍，以建立自訂相機陣列。輸出包括生成的目標視角影片和相機元資料，這些可作為後續 4D 高斯點雲（4DGS）重構的輸入。

適用對象

本工具專為從事 4D 人體重構、電腦視覺和數位人創建的研究人員與開發者設計，也適合希望將合成多視角資料與 4DGS 流程整合的使用者。

主要亮點

• 靈活的相機佈局：支援多種配置，從簡單的 6 視角環繞到跨越三個俯仰層的密集 48 視角佈局。
• 與 4DGS 集成：提供腳本用於匯出資料至 Nerfstudio，並訓練僅前景的 3D 高斯點雲模型。
• 可自訂視角：可精確控制視角數量、俯仰角和偏航覆蓋範圍。
• 自動化工作流程：首次使用時會自動下載所需模型和範例。