FaceTalk

上传语音，一键生成3D数字人面部动画

开源 🏷️完全免费 🔧 仅开源项目，无在线服务，需自行部署 数字人3D 🍴 复刻 2 🐛 待处理 5 👀 关注 41
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 239
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目，代码公开，可自行部署使用，无收费计划。

项目预览

FaceTalk 项目界面预览图
图片来源：GitHub 官方仓库名片

项目数据

分类数字人3D
开发团队shivangi-aneja
官网地址https://shivangi-aneja.github.io/projects/facetalk
GitHubhttps://github.com/shivangi-aneja/FaceTalk
定价模式🏷️完全免费
价格说明开源项目，代码公开，可自行部署使用，无收费计划。
访问状态🔧 仅开源项目，无在线服务，需自行部署
是否开源是
开源协议NOASSERTION
主要语言Shell
技术栈/模型3d-facial-animation,cvpr2024,diffusion-models,facial-animation,implicit-neural-representation,speech-driven,speech-driven-talking-face,talking-face-generation,talking-head
GitHub 星标★ 239
上线时间2023-11-30 00:00:00
代码更新2024-03-17
仓库体积19 KB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

FaceTalk 是一个基于音频驱动的 3D 数字人头像动画生成框架，来自 CVPR 2024。它利用扩散模型将语音音频转化为神经参数化头部模型（如 FLAME）的运动序列，解决传统音频驱动面部动画中表情僵硬、口型同步差、缺乏自然动作变化等问题。核心能力包括：从音频中生成高保真的面部表情和头部姿态运动，支持多种情感和说话风格，并能与现有神经渲染管线无缝集成。项目提供完整的训练和推理代码，基于 PyTorch 实现，适合研究人员和开发者用于数字人、虚拟助手、游戏角色等场景。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 239

核心亮点

  • 基于扩散模型，生成的面部动作自然且多样，超越传统回归方法
  • 支持FLAME等标准参数化头部模型，易于集成到现有3D工作流
  • CVPR 2024论文加持，方法有学术保障，代码结构清晰

不足之处

  • 项目早期，文档和社区支持待观察
  • 依赖特定参数化模型，泛化到自定义头部模型需额外适配

适用场景

  • 数字人直播与虚拟主播的实时口型驱动
  • 游戏和影视中角色面部动画的快速生成
  • 辅助听力障碍人士的视觉语音识别研究

替代项目

SadTalker、Wav2Lip、Audio2Face (NVIDIA)

上一篇：SadTalker

下一篇：OTAvatar

同类项目推荐

GNM 开源

一键生成高精度参数化数字人头像，驱动表情与动画

An open ecosystem of parametric human models and perception stacks, starting with GN···

★ 1632 2026-08-09
VoxHammer 开源

无需训练，直接在 3D 空间里精准编辑模型

[3DV 2026 Oral] VoxHammer: Training-Free Precise and Coherent 3D Editing in Native 3···

★ 247 2026-08-09
StableGen 开源

在 Blender 里用 AI 一键生成纹理，告别繁琐贴图流程

Transform your 3D texturing workflow with the power of generative AI, directly withi···

★ 1633 2026-08-09
ditto-talkinghead 开源

音频驱动实时说话头像，运动空间扩散精准可控

[ACM MM 2025] Ditto: Motion-Space Diffusion for Controllable Realtime Talking Head S···

★ 932 2026-08-09
3DRAE 开源

把3D场景压成1000个token，让生成又快又省。

[NeurIPS 2026] Any 3D Scene is Worth 1K Tokens: 3D-Grounded Representation for Scene···

★ 74 2026-08-09
talking-avatar-with-ai 开源

让网页里的虚拟形象开口说话，还能听懂你

This project is a digital human that can talk and listen to you. It uses OpenAI's GP···

★ 472 2026-08-09
sjc 开源

用2D扩散模型直接生成3D，无需3D数据

Score Jacobian Chaining: Lifting Pretrained 2D Diffusion Models for 3D Generation (C···

★ 523 2026-08-09
mixar-app 开源

在 Blender 里用 AI 从灵感板一路做到贴图

AI-powered 3D suite built on Blender, with an integrated agent, moodboard, generatio···

★ 595 2026-10-27
LangScene-X 开源

用视频扩散模型，一句话重建带语义的 3D 场景

[ICCV 2025] LangScene-X: Reconstruct Generalizable 3D Language-Embedded Scenes with ···

★ 303 2026-08-09