NeRFFaceSpeech_Code

单张照片+语音，生成逼真3D说话头像

开源 🏷️完全免费 🔧 仅开源项目，无在线服务，需自行部署 数字人3D 🍴 复刻 4 👀 关注 9
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 63
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目，MIT许可证，完全免费，可自行部署使用。

项目预览

NeRFFaceSpeech_Code 项目界面预览图
图片来源：GitHub 官方仓库名片

项目数据

分类数字人3D
开发团队rlgnswk
官网地址https://rlgnswk.github.io/NeRFFaceSpeech_ProjectPage
GitHubhttps://github.com/rlgnswk/NeRFFaceSpeech_Code
定价模式🏷️完全免费
价格说明开源项目，MIT许可证，完全免费，可自行部署使用。
访问状态🔧 仅开源项目，无在线服务，需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型3d-head,audio-driven-talking-face,cvprw2024,image-animation,nerf,one-shot,talking-head
GitHub 星标★ 63
上线时间2024-05-08 00:00:00
代码更新2024-10-24
仓库体积13.7 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数6

项目介绍

NeRFFaceSpeech_Code 是一个基于 NeRF（神经辐射场）的 3D 说话头生成开源项目，对应 CVPRW 2024 论文。它解决的是从单张人脸图片和一段音频驱动生成逼真 3D 说话头的问题，即 one-shot 音频驱动的 3D 说话头合成。核心能力包括：利用生成先验（如 3D GAN）来增强 NeRF 的泛化能力，在仅有单张参考图的情况下，也能生成具有自然唇形、表情和头部姿态的 3D 动态头像。项目提供完整的训练和推理代码，支持自定义音频和图片输入，输出视频或 3D 模型。技术栈以 Python 和 PyTorch 为主，适合研究数字人、虚拟形象生成、人机交互等领域。当前项目处于早期阶段，代码结构清晰，但依赖较多，需要一定的环境配置。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 63

核心亮点

  • 基于 CVPRW 2024 论文，方法新颖，结合 NeRF 与生成先验，提升 one-shot 泛化能力
  • 提供完整训练和推理代码，支持自定义输入，便于二次开发
  • 输出包含唇形、表情和头部姿态，效果自然，适合数字人应用

不足之处

  • 依赖较多（如 PyTorch、NeRF 相关库），环境配置复杂
  • 文档/社区待观察，项目早期，使用教程和社区支持有限

适用场景

  • 数字人直播或视频制作，用单张照片快速生成虚拟主播
  • 虚拟助手或客服，实现语音驱动的 3D 形象交互
  • 影视或游戏角色动画，降低 3D 头像制作成本

替代项目

SadTalker、Wav2Lip、ER-NeRF

上一篇：DiffPoseTalk

下一篇：SadTalker

同类项目推荐

Audio2Head 开源

输入一张照片和语音，生成头部自然晃动的说话视频

code for paper "Audio2Head: Audio-driven One-shot Talking-head Generation with Natur···

★ 351 2026-08-09
cube 开源

用一句话生成 3D 模型，在 Roblox 里快速落地 AI 创作

Roblox Foundation Model for 3D Intelligence

★ 1316 2026-08-09
Text2Video 开源

输入文字，自动生成口型同步的说话人视频。

ICASSP 2022: "Text2Video: text-driven talking-head video synthesis with phonetic dic···

★ 438 2026-08-09
awesome-avatar 开源

一页看遍3D数字人资源，快速找到你要的工具和论文。

A curated list of resources dedicated to avatar.

★ 61 2026-08-09
DLRS 开源

把你备份成数字遗产，多年后仍能对话。

DLRS: Privacy-first digital life archive standard for consent governance, AI avatars···

★ 4 2026-08-09
reality-engine 开源

用 AI 快速搭建会演变的虚拟世界和故事

Top Dynamic AI World Simulation & Storytelling Tools 2026

★ 132 2026-08-09
Speech2Video 开源

输入一段语音，自动生成带3D姿态的说话人视频

ACCV 2020 "Speech2Video Synthesis with 3D Skeleton Regularization and Expressive Bod···

★ 99 2026-08-09
GaussianCube 开源

把3D高斯塞进立方体，让生成模型直接吃，又快又稳

[NeurIPS 2024] GaussianCube: A Structured and Explicit Radiance Representation for 3···

★ 427 2026-08-09
CorbeauSplat 开源

Mac 上一条命令，视频照片变可看 3D 高斯场景

CorbeauSplat is an all-in-one Gaussian Splatting automation tool designed specifical···

★ 183 2026-10-07