xg-chu/GAGAvatar

解決的問題

GAGAvatar 解決了從單張影像建立可控制的 3D 頭部虛擬角色的挑戰。它支援單次輸入即可完成人物頭部的 3D 重構，並實現即時重演，也就是該虛擬角色可由另個人的動作或表情驅動。

工作原理

本專案使用 3D 高斯點陣（3DGS）進行頭部重構。它改良了標準的 3DGS 渲染器，使高斯點能攜帶 32 維特徵，從而實現更靈活且具泛用性的重構。系統可由目標人物的一張影像與一個驅動來源（可為影像或影片）驅動，透過追蹤系統將驅動來源的動作映射至虛擬角色上。

適用對象

本工具適用於從事 3D 視覺、數位人與即時動畫的研究人員與開發者，以及對面對面重演技術感興趣的使用者。

核心亮點

• 單次重構：僅需一張影像即可生成 3D 頭部虛擬角色。
• 即時性能：支援高速的頭部虛擬角色重演。
• 基於 3DGS：利用高斯點陣實現高效渲染。
• 可控制性：可透過影像或影片驅動，實現頭部虛擬角色的動畫化。