ml-talking-face

传一张照片和一段语音,自动生成对口型说话视频

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 13 🐛 待处理 4 👀 关注 3
GitHub ↗
GitHub 星标 ★ 54
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,无在线服务,需自行部署,全部功能免费。

项目预览

ml-talking-face 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队deepkyu
定价模式🏷️完全免费
价格说明开源项目,无在线服务,需自行部署,全部功能免费。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Python
技术栈/模型multilingual,talking-face-generation,tts
GitHub 星标★ 54
上线时间2022-07-14 00:00:00
代码更新2022-09-29
仓库体积904 KB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数10

项目介绍

这是一个基于CVPR 2022论文的AI数字人说话视频生成项目,通过输入一段音频和一张静态人脸照片,即可生成人物嘴巴与音频同步的说话视频。项目核心解决的是数字人视频制作中口型同步的难题,利用深度学习模型分析音频特征并驱动面部关键点运动,实现自然逼真的口型匹配。作为Hugging Face Spaces的克隆仓库,它提供了完整的模型推理代码和预训练权重,开发者可以快速部署到本地或服务器,用于创建虚拟主播、教育视频、多语言配音等内容。项目采用Python实现,依赖主流的深度学习框架,适合研究语音驱动面部动画的技术人员或需要批量生成数字人视频的开发者。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 54

核心亮点

  • 基于CVPR 2022论文,口型同步算法有学术保障
  • 提供预训练模型和推理脚本,上手门槛低
  • 支持自定义音频和图片,灵活适配多种场景

不足之处

  • 文档仅英文且较简略,缺少详细配置指南
  • 依赖较多,环境搭建可能遇到兼容性问题

适用场景

  • 虚拟主播快速生成
  • 教学视频口型配音
  • 多语言视频本地化

替代项目

Wav2Lip、SadTalker、MakeItTalk

上一篇:vtbai

下一篇:awesome-ai-talking-heads

同类项目推荐

Animate3D 开源

上传静态3D模型,一键生成多视角动态动画视频。

[NeurIPS 2024] Animate3D: Animating Any 3D Model with Multi-view Video Diffusion

★ 259 2026-08-09
DreamCraft3D 开源

上传一张图,秒变可交互的高质量 3D 模型

[ICLR 2024] Official implementation of DreamCraft3D: Hierarchical 3D Generation with···

★ 3041 2026-08-09
ExAvatar_RELEASE 开源

单段视频训练可动全身高斯数字人

Official PyTorch implementation of "Expressive Whole-Body 3D Gaussian Avatar", ECCV ···

★ 676 2026-10-28
LLMUnity 开源

在 Unity 里拖拽几下,就能让 NPC 开口聊大模型。

Create characters in Unity with LLMs!

★ 1735 2026-08-09
TaoMate 开源

一段音频,实时生成不崩脸的长视频数字人

a real-time digital-human model for long-form audio-video generation

★ 518 2026-09-13
digital-human-koubo 开源

一张照片,自动生成带包装的口播数字人视频

AI digital-human talking-head videos from one photo: Renoise MCP generation + 5 edit···

★ 1906 2026-10-30
NeRFFaceSpeech_Code 开源

单张照片+语音,生成逼真3D说话头像

One-shot Audio-driven 3D Talking Head Synthesis via Generative Prior, CVPRW 2024

★ 63 2026-08-09
ai-avatar-bot 开源

给动漫形象装上嘴巴,开口就能问答当客服。

Live2D/VRM voice AI avatar with lip sync, knowledge base, operations dashboard, sup···

★ 204 2026-08-09
DigitalLife 开源

给AI装上记忆和Live2D身体,打造能记住你的虚拟生命

一个具有长时记忆和 Live2d 形象的"数字生命" / A digital life with long-term memories ···

★ 51 2026-08-09