StableAvatar

一张图加一段音频,生成无限时长数字人视频

StableAvatar 是一个基于视频扩散 Transformer 的端到端数字人视频生成框架,只需输入一张参考图和一段音频,即可生成无限长度、高质量的口播视频,无需任何后处理。它解决了传统数字人视频生成中常见的口型不同步、视频长度受限、需要复杂后处理等问题。核心能力包括:音频驱动的口型精准同步、基于参考图的人物外观保持、无限时长视频生成、端到端训练与推理。项目采用 Python 实现,技术栈涉及 AIGC、数字人生成和视频生成,目前处于成长阶段,适合研究者和开发者用于构建虚拟主播、教育视频、客服数字人等应用。

开源 free 视频生成
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 1261
维护状态 低维护
是否开源
定价模式 free

项目数据

分类视频生成
开发团队Francis-Rings
所属国家
官网地址
定价模式free
价格说明开源项目,MIT许可证,可免费使用和部署,无在线服务。
访问状态
是否开源
开源协议MIT
主要语言Python
技术栈/模型aigc,avatar-generator,video-generation
GitHub 星标★ 1261
30天Star增速
HF 下载量
上线时间2025-08-11 00:00:00
最近更新2026-09-23 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数4

使用教程

难度:进阶 约 15 分钟 部署方式:本地安装 6 步

环境要求

  • 已安装 Python 与 pip 的 Linux/Windows 环境
  • NVIDIA GPU 及匹配的 CUDA 驱动(普通卡用 cu124,Blackwell 系列用 cu128)
  • 基础模型(model_full_load 模式)生成 5 秒 480x832、25fps 视频约需 18GB 显存
  • 足够的磁盘空间用于存放仓库依赖与模型权重

安装与启动步骤

  1. 1获取项目代码

    从 GitHub 拉取 StableAvatar 仓库,后续所有环境安装命令都在仓库根目录执行。

    git clone https://github.com/Francis-Rings/StableAvatar.git
    cd StableAvatar
  2. 2安装 PyTorch 基础环境

    按 README 指定版本安装基于 CUDA 12.4 的 torch、torchvision、torchaudio,版本号勿随意改动。

    pip install torch==2.6.0 torchvision==0.21.0 torchaudio==2.1.1 --index-url https://download.pytorch.org/whl/cu124
  3. 3安装项目依赖

    安装仓库 requirements.txt 中列出的全部依赖,需在项目根目录执行。

    pip install -r requirements.txt
  4. 4可选:安装 flash_attn

    README 标注为可选项,用于加速注意力计算;编译失败可跳过,不影响基本使用。

    pip install flash_attn
  5. 5Blackwell 芯片替代方案

    若使用 Blackwell 系列显卡,改用 CUDA 12.8 版本的 PyTorch 组合,再装依赖与可选的 flash_attn。

    pip install torch==2.7.0 torchvision==0.22.0 torchaudio==2.7.0 --index-url https://download.pytorch.org/whl/cu128
    pip install -r requirements.txt
    pip install flash_attn
  6. 6按显存调整参数

    显存不足时适当减少生成帧数或降低输出分辨率;基础版支持 480x832、832x480、512x512。

关键配置

配置项必填说明示例
--GPU_memory_mode控制显存加载策略,基础模型常用 model_full_load 全量加载model_full_load

如何确认成功

pip 安装无报错,执行 python -c "import torch;print(torch.cuda.is_available())" 输出 True 即环境就绪。

常见问题

Q:显存不足(OOM)怎么办?

A:README 建议适当减少生成的动画帧数或降低输出视频分辨率,也可以把 VAE 放到 CPU 上运行以节省显存。

Q:生成长视频时显存爆掉?

A:3D VAE 解码器显存需求很高,尤其是解码 1 万帧以上时,README 建议选择在 CPU 上运行 VAE。

Q:必须安装 flash_attn 吗?

A:不是必须,README 中标注为 Optional,仅用于加速注意力计算,装不上可跳过。

Q:用 50 系(Blackwell)显卡怎么装?

A:使用 README 提供的 Blackwell 专用命令,安装 CUDA 12.8 对应的 torch 2.7.0、torchvision 0.22.0、torchaudio 2.7.0,再装依赖。

Q:支持哪些输出分辨率?

A:基础版(Wan2.1-1.3B)支持 480x832、832x480、512x512,理论上可合成数小时视频而无明显质量下降。

注意事项

  • torch 与 CUDA 版本必须按 README 匹配,普通卡用 cu124 组合,Blackwell 系列用 cu128 组合。
  • 性能参考:5 秒 480x832、25fps 的视频在 4090 上约需 18GB 显存、耗时约 3 分钟。
  • README 节选中未给出具体推理/启动脚本命令,实际生成命令需查阅仓库内脚本与参数说明。
  • 全量加载(model_full_load)显存占用较高,长视频解码建议考虑将 VAE 放 CPU。

核心亮点

  • 端到端视频扩散 Transformer,无需后处理即可生成高质量视频
  • 支持无限长度视频生成,突破传统方法长度限制
  • 口型同步精准,基于音频驱动,人物外观保持良好

不足之处

  • 文档/社区待观察
  • 项目尚处成长阶段,生态和工具链可能不成熟

适用场景

  • 虚拟主播和数字人直播
  • 在线教育课程视频自动生成
  • 客户服务数字人交互

替代项目

SadTalker、Wav2Lip、GeneFace

项目介绍

StableAvatar 是数字人3D领域的开源项目,由 Francis-Rings 开发,2025 年首次发布。

在全站 13,014 个收录项目中,它的 GitHub 星标数(1,261)位列前 30%,在数字人3D分类中处于中上游。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-23。MIT许可证,可免费使用和部署,无在线服务。

它主要面向的使用场景是:虚拟主播和数字人直播。同类可对比的替代方案包括 SadTalker、Wav2Lip、GeneFace。

上一篇:HunyuanPortraitLCM

下一篇:DIMO

同类项目推荐

A3D 开源

在 three.js 里直接调用 AI 生成纹理和素材,边建模边生成

3D x AI hybrid editor, built with three.js

★ 129 2026-08-09
cube 开源

用一句话生成 3D 模型,在 Roblox 里快速落地 AI 创作

Roblox Foundation Model for 3D Intelligence

★ 1254 2026-08-09
AG3D 开源

用2D图片直接生成3D虚拟人,告别昂贵扫描

Official code release for ICCV2023 paper AG3D: Learning to Generate 3D Avatars from ···

★ 273 2026-08-09
GameFactory-3A 开源

一条命令生成 3A 游戏资产,从模型到视频全自动

A comprehensive open-source 3A game-generation skill and asset framework.

★ 778 2026-08-21