ant-research/4DAnyone

解决的问题

4DAnyone 解决了从单个随意的单目视频生成人物一致多视角视频的挑战。这一过程对于后续的 4D 高斯点阵（4DGS）重建至关重要，它能够从 2D 视频创建动态 3D 场景。

工作原理

该系统以单人视频为输入，生成多个从不同摄像机角度（目标视角）同步输出的视频。无需输入摄像机参数或固定摄像机。用户可灵活配置摄像机位置，包括完整的 360 度环绕或特定的正面弧线，并支持多层俯仰角，以确保对主体的全面覆盖。

适用人群

本工具专为从事 4D 重建、计算机视觉和数字人创建的研究人员与开发者设计，适用于需要从单视角源获取高质量多视角数据的用户。

主要亮点

• 灵活的视角生成：支持数十个输出视角，可自定义摄像机位置和俯仰层。
• 两种模型选项：提供标准的 Base 模型和经过蒸馏的 Turbo 模型，显著提升去噪速度。
• 支持消费级 GPU：优化运行于 VRAM 低于 24 GB 的 GPU（如 RTX 4090）。
• 交互式 GUI：集成基于 Gradio 的界面，支持使用 Rerun 进行交互式推理与可视化。