xg-chu/GAGAvatar

解决的问题

GAGAvatar 解决了从单张图像创建可控制的 3D 头部虚拟形象的挑战。它支持单次输入即可完成人物头部的 3D 重建，并实现实时重演，即该虚拟形象可由另一个人的运动或表情驱动。

工作原理

该项目使用 3D 高斯点阵（3DGS）进行头部重建。它对标准的 3DGS 渲染器进行了改进，使高斯点能够携带 32 维特征，从而实现更灵活、更具泛化能力的重建。系统可由目标人物的一张图像和一个驱动源（可以是图像或视频）驱动，通过追踪系统将驱动源的运动映射到虚拟形象上。

适用人群

本工具适用于从事 3D 视觉、数字人和实时动画的研究人员与开发者，以及对面对面重演技术感兴趣的用户。

核心亮点

• 单次重建：仅需一张图像即可生成 3D 头部虚拟形象。
• 实时性能：支持高速的头部虚拟形象重演。
• 基于 3DGS：利用高斯点阵实现高效渲染。
• 可控制性：可通过图像或视频驱动，实现头部虚拟形象的动画化。