ConsisID

输入文本和一张人脸,生成身份一致的视频。

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 视频生成 🍴 复刻 48 🐛 待处理 36 👀 关注 13
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 866
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,Apache-2.0许可,可免费使用和部署。

项目预览

ConsisID 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队PKU-YuanGroup
定价模式🏷️完全免费
价格说明开源项目,Apache-2.0许可,可免费使用和部署。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型diffusion,diffusion-models,identity-preserving,text-to-video,video-generation,video-generation-dataset,video-generator,videogeneration
GitHub 星标★ 866
上线时间2024-11-15 00:00:00
代码更新2026-04-14
仓库体积13.7 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

ConsisID 是一个面向身份保持的文本到视频生成模型,由 CVPR 2025 Highlight 论文提出。它解决的是在视频生成中,如何根据文本描述生成指定人物身份的视频,同时保持面部特征一致性的问题。核心创新在于利用频率分解技术,将人物身份信息分解为低频和高频分量,分别建模和处理,从而在生成过程中更稳定地保留身份特征。项目提供了完整的训练和推理代码,以及配套的数据集,支持自定义训练。技术栈基于扩散模型,适合研究和开发人员用于身份保持的视频生成任务。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 866

使用教程

难度:高级 约 60 分钟 部署方式:本地安装 4 步

环境要求

  • NVIDIA GPU 24G 显存以上
  • Python 3.11
  • CUDA 11.8/12.1

安装与启动步骤

  1. 1建环境

    官方指定 Python 3.11 与 torch 2.5.1。

    conda create -n consisid python=3.11.0
    conda install pytorch==2.5.1 torchvision==0.20.1 torchaudio==2.5.1 pytorch-cuda=11.8 -c pytorch -c nvidia
  2. 2装依赖

    按 requirements 装,diffusers 版本要对齐。

    pip install -r requirements.txt
  3. 3下权重

    脚本会拉主模型与辅助模型。

    python download_weights.py
  4. 4推理

    给参考人脸图 + 文本,保持身份一致性生成视频。

    python infer.py --model_path BestWishYsh/ConsisID-preview

如何确认成功

输出视频中的人物面部与参考图保持同一身份。

注意事项

  • 它是免微调的 DiT 方案,靠频域特征约束身份。
  • 提示词里加轻微表情变化,生成会更自然。

核心亮点

  • 频率分解创新,有效平衡身份保持与生成多样性
  • 提供完整训练代码和数据集,便于复现和二次开发
  • CVPR 2025 Highlight,学术认可度高

不足之处

  • 早期项目,文档和社区支持待观察
  • 依赖大规模计算资源,训练门槛较高

适用场景

  • 数字人视频生成,如虚拟主播、客服
  • 影视制作中的角色一致性生成
  • 个性化视频内容创作,如定制化营销视频

替代项目

AnimateAnyone、DreamPose、Vlogger

上一篇:FancyVideo

下一篇:phenaki-pytorch

同类项目推荐

stylegan-v 开源

用StyleGAN2的代价生成连续高清视频,支持任意时长和帧率

[CVPR 2022] StyleGAN-V: A Continuous Video Generator with the Price, Image Quality a···

★ 390 2026-08-09
swd 开源

无需标注,用GAN同时生成图像和视频

unsupervised video and image generation

★ 57 2026-08-09
magvit 开源

用掩码 Transformer 高效生成高质量视频,支持预测、补全和插值。

Official JAX implementation of MAGVIT: Masked Generative Video Transformer

★ 1002 2026-08-09
HunyuanCustom 开源

多模态驱动,定制你的专属视频生成

HunyuanCustom: A Multimodal-Driven Architecture for Customized Video Generation

★ 1232 2026-08-09
Video-P2P 开源

用一句话改视频,AI 帮你保持画面连贯

Video-P2P: Video Editing with Cross-attention Control

★ 430 2026-08-09
millivid 开源

让AI生成的长视频不再跳帧变脸,保持前后一致

[to appear at NeurIPS 2026] Official implementation of "MilliVid: Adaptive Latents f···

★ 118 2026-09-29
awesome-ai-motion 开源

看动效案例,拿提示词和源码,直接抄作业

发现惊艳动效、创意视频与交互艺术,探索背后的源码、提示词与制作过程。Curated motion d···

★ 542 2026-10-08
seedance-2.0-api 开源

快速上手字节Seedance 2.0,文本/图片一键生成视频

Seedance 2.0 API — text-to-video and image-to-video examples

★ 253 2026-08-26
VACE 开源

一个模型搞定视频生成与编辑,多条件随心控

[ICCV 2025] Official implementations for paper: VACE: All-in-One Video Creation and ···

★ 4058 2026-08-09