
项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 383
使用教程
ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。
环境要求
- Linux + NVIDIA GPU
- Python 3.10+
- 麦克风
安装与启动步骤
-
1装后端
先按后端说明起推理服务,模型权重单独下载
-
2下模型
语音识别、对话与口型三套权重都要备齐
-
3起前端
浏览器里加载角色,确认能听到声音、看到口型
-
4接自己的模型
把对话后端换成本地模型或你自己的接口
如何确认成功
对着麦克风说一句话,角色能在两秒内开始回应,口型与语音基本同步。
注意事项
- 实时数字人框架,把语音识别、大模型对话、语音合成与口型驱动串成一条链路。
- 链路长,任意一环没起来整体就没反应,排错要逐段看日志。
- 权重不随仓库分发,下载体积大,注意磁盘余量。
- 实时性靠显存换,小卡上帧率掉下来口型会明显滞后。
- 涉及摄像头与麦克风权限,演示场景注意隐私告知。
核心亮点
- 基于TypeScript,类型安全,易于前端开发者上手
- 开源且早期,社区贡献空间大,可塑性强
- 聚焦自主行为,集成AI逻辑,超越静态模型
不足之处
- 项目处于早期,文档和示例可能不完善
- 功能覆盖有限,复杂动画和物理效果待增强
适用场景
- 网页虚拟助手或客服数字人
- 游戏中的NPC角色开发
- 在线教育或培训的虚拟讲师
替代项目
Ready Player Me、three.js、Babylon.js
下一篇:instant-nvr
同类项目推荐
一张插画,几步变成能动的 2D 虚拟主播
Turn one illustration into an animated 2D mesh avatar with a coding agent and a loca···
一张照片生成可实时驱动的 3D 数字人头
[NeurIPS 2024] Generalizable and Animatable Gaussian Head Avatar
GameFactory-3A
开源
一条命令生成 3A 游戏资产,从模型到视频全自动
A comprehensive open-source 3A game-generation skill and asset framework.
CraftsMan3D
开源
从图片或文字一键生成可编辑的高保真 3D 网格
CraftsMan: High-fidelity Mesh Generation with 3D Native Diffusion and Interactive Ge···
一键生成数字人短视频并自动发布到全网
Generate 16:9 & 9:16 videos with your HeyGen avatar, animated backgrounds (HyperFram···
DLRS
开源
把你备份成数字遗产,多年后仍能对话。
DLRS: Privacy-first digital life archive standard for consent governance, AI avatars···
clouddh-share
开源
填个 Key 就能用的桌面悬浮数字人,语音对话开箱即玩
Windows 悬浮窗数字人客户端(分享版): 云端包办 ASR/LLM/TTS/渲染, 本地只需填自己的 Vidu···
TaoMate
开源
一段音频,实时生成不崩脸的长视频数字人
a real-time digital-human model for long-form audio-video generation
Awesome-Gaussian-Skills
开源
3D图形学论文+AI技能,一键调用加速研究
1000+ arXiv-verified 3DGS methods · 15 AI agent skills · MCP server (34 tools) · ···