4DAnyone

上传一段普通视频,即可生成可自由观看的 4D 动态人物。

开源 🏷️定价信息待确认 🔧 仅开源项目,无在线服务,需自行部署 视频生成 🍴 复刻 105 🐛 待处理 6 👀 关注 15
GitHub ↗
GitHub 星标 ★ 1457
维护状态 较活跃
是否开源 开源
定价模式 🏷️定价信息待确认

项目预览

4DAnyone 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队ant-research
定价模式🏷️定价信息待确认
价格说明定价信息待确认
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型4d-gaussian-splatting,generative-ai,generative-model,video-generation,video-world-model
GitHub 星标★ 1457
上线时间2026-08-10 00:00:00
代码更新2026-10-14
仓库体积82.3 MB
本站数据更新2026-11-02
维护状态较活跃
收录时间2026-09-10
浏览次数2

项目介绍

4DAnyone 是一个从单目视频生成动态 4D 人物的开源项目,由 SIGGRAPH Asia 2026 收录。它解决了从日常随意拍摄的单目视频中重建出可自由观看的 4D 人物模型这一难题。其核心能力包括:利用 4D 高斯泼溅技术高效表示动态场景,结合生成式 AI 模型补全视频中未观测到的身体部分和动态细节,从而输出具有真实感、可自由旋转视角的动态人物。项目提供了完整的训练和推理流程,支持自定义视频输入,生成结果可应用于虚拟现实、游戏、影视制作等领域。该项目的技术栈涉及 4D 高斯泼溅、生成式模型、视频世界模型等前沿方向,在 GitHub 上已获得 1260 星标,属于成长中的热门项目。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-09-10 · 当前星标 ★ 1457

使用教程

ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。

难度:进阶 约 30 分钟 部署方式:本地安装 6 步

环境要求

  • Linux 环境(README 命令基于 bash,含 conda)
  • 已安装 Git,可克隆仓库与子模块
  • 已安装 Conda,可创建 Python 3.11 环境
  • NVIDIA GPU,峰值显存需低于 24 GB(RTX 4090 可运行)

安装与启动步骤

  1. 1克隆项目仓库

    从 GitHub 拉取 4DAnyone 源码,README 建议定期 git pull 获取最新改进。

    git clone https://github.com/ant-research/4DAnyone.git
  2. 2初始化子模块

    进入项目目录并初始化 third_party/GVHMR 子模块,跳过会导致后续代码缺失。

    cd 4DAnyone
    git submodule update --init third_party/GVHMR
  3. 3创建 conda 环境

    按 README 要求创建名为 4danyone 的环境,Python 版本必须为 3.11。

    conda create -n 4danyone python=3.11 -y
  4. 4激活环境

    后续所有 pip 安装与脚本运行都需在该环境中执行。

    conda activate 4danyone
  5. 5安装 Python 依赖

    按 requirements.txt 安装全部依赖,若需更快的推理可另装注意力后端。

    pip install -r requirements.txt
  6. 6下载模型与示例

    首次使用会自动下载缺失模型;也可用脚本手动下载 SMPL-X、模型与示例数据。

    python scripts/download_smplx.py
    python scripts/download_model.py
    python scripts/download_example.py

如何确认成功

README 未给出推理启动命令;可确认 conda 环境已激活、pip 安装无报错,且三个下载脚本能成功拉取模型与示例。

常见问题

Q:需要多大的显存才能跑?

A:README 说明峰值约 22 GB CUDA 显存,已降到 24 GB 以下,可在 RTX 4090 等消费级 GPU 上推理。

Q:推理速度大概多快?

A:单张 RTX 4090 上,121 帧视频平均约 27 秒;4DAnyone-Turbo 相比 Base 有 5.58 倍去噪加速。

Q:需要相机参数或固定机位吗?

A:不需要。README 明确说明既不需要输入相机参数,也不要求静态相机。

Q:必须安装 FlashAttention-3 或 SageAttention 吗?

A:不是必须的,属于可选加速项;安装后会被自动启用,可参考对应官方仓库安装。

Q:模型文件要手动下载吗?

A:不需要,缺失的模型和示例会在首次使用时自动下载;也可用提供的三个脚本手动下载。

注意事项

  • README 只提供了安装步骤,未给出推理或训练的具体命令,需参考官方项目页与论文。
  • git submodule update --init third_party/GVHMR 不可省略,否则缺少 GVHMR 子模块代码。
  • 可选安装 FlashAttention-3 或 SageAttention 以加快推理,已安装的后端会被自动启用。
  • 项目仍在迭代,README 建议定期执行 git pull 获取最新改进。

核心亮点

  • 单目视频即可生成 4D 人物,无需昂贵的多视角采集设备
  • 采用 4D 高斯泼溅技术,动态场景渲染质量高且速度快
  • 结合生成式模型补全未观测区域,人物完整度好

不足之处

  • 训练和推理对 GPU 显存要求较高,普通消费级显卡可能难以运行
  • 文档/社区待观察

适用场景

  • 游戏角色快速建模,从视频生成可动画的 3D 人物
  • 影视特效制作,将实拍视频转换为可自由调度的 4D 资产
  • 虚拟现实/元宇宙社交,创建个性化动态虚拟化身

替代项目

Human4D、4D-Humans、GaussianAvatars

上一篇:MOVA

下一篇:anything2explainer

同类项目推荐

AI-Youtube-Shorts-Generator 开源

长视频一键变爆款竖屏短视频,免费无限制

Open-source alternative to Opus Clip, Vidyo.ai, Klap & SubMagic. Turn long-form YouT···

★ 5722 2026-08-09
make-a-video-pytorch 开源

用文本描述直接生成短视频,复现Meta最新AI模型

Implementation of Make-A-Video, new SOTA text to video generator from Meta AI, in Py···

★ 1989 2026-08-09
magvit 开源

用掩码 Transformer 高效生成高质量视频,支持预测、补全和插值。

Official JAX implementation of MAGVIT: Masked Generative Video Transformer

★ 1002 2026-08-09
google-veo3-from-scratch 开源

手把手从零复现 Veo 3,搞懂视频生成核心架构

A Step-by-Step Implementation of Google Veo 3 Architecture from Scratch

★ 84 2026-08-09
ai-video-studio 开源

短剧团队一站式 AI 视频生产平台,时间线驱动,智能体协作出片

AI video production workflow platform for professional short drama teams. Timeline-f···

★ 69 2026-08-09
VEnhancer 开源

给AI生成的视频补细节、提帧率、升分辨率

Official codes of VEnhancer: Generative Space-Time Enhancement for Video Generation

★ 579 2026-08-09
panacea 开源

一键生成自动驾驶全景视频,可控又逼真

[CVPR2024] Official Repository of Paper "Panacea: Panoramic and Controllable Video G···

★ 263 2026-08-09
TATS 开源

用文本或音频生成分钟级连贯长视频,突破短视频限制。

Official PyTorch implementation of TATS: A Long Video Generation Framework with Time···

★ 289 2026-08-09
ConsisID 开源

输入文本和一张人脸,生成身份一致的视频。

[CVPR 2025 Highlight] Identity-Preserving Text-to-Video Generation by Frequency Deco···

★ 863 2026-08-09