talking-avatar-with-ai

让网页里的虚拟形象开口说话，还能听懂你

这是一个基于浏览器运行的AI数字人对话项目，能够实现语音交互和实时口型同步。它通过OpenAI的GPT模型生成对话内容，Whisper进行语音识别，Eleven Labs合成语音，并使用Rhubarb Lip Sync根据音频生成口型动画，最终在网页上呈现一个能听会说的虚拟形象。项目解决了从文本到语音再到视觉口型同步的完整链路，让开发者可以快速集成一个具备自然对话体验的数字人界面。核心能力包括语音输入、智能回复、语音输出和口型匹配，适合用于虚拟助手、在线教育、客户服务等场景。项目采用JavaScript编写，基于Web技术，易于部署和定制。

开源 free 数字人3D

访问官网 ↗ GitHub ↗ 文档 ↗

GitHub 星标 ★ 467

维护状态较活跃

是否开源是

定价模式 free

项目数据

分类数字人3D

开发团队asanchezyali

所属国家

官网地址

GitHubhttps://github.com/asanchezyali/talking-avatar-with-ai

定价模式free

价格说明开源项目，可自行部署，无在线服务，免费使用。

访问状态

是否开源是

开源协议

主要语言JavaScript

技术栈/模型ai-avatars,digital-human,elevenlabs,lip-sync,lipsync,llms,openai-api,rhubarb-lip-sync,visemes,whisper

GitHub 星标★ 467

30天Star增速

HF 下载量

上线时间2024-01-11 00:00:00

最近更新2026-09-22 00:00:00

维护状态较活跃

中文支持

访问方式

移动端支持

综合评分

收录时间2026-08-09

浏览次数5

使用教程

核心亮点

完整集成语音识别、AI对话、语音合成和口型同步，开箱即用
基于Web技术，无需复杂后端，部署简单
模块化设计，可替换各AI服务提供商

不足之处

依赖多个外部付费API（OpenAI、Eleven Labs），运行成本较高
口型同步效果依赖Rhubarb Lip Sync，对复杂表情支持有限
文档/社区待观察

适用场景

虚拟客服助手，提供语音交互服务
在线教育中的虚拟教师，进行语音讲解
娱乐互动，如虚拟偶像或游戏NPC对话

替代项目

HeyGen、SadTalker、Wav2Lip

项目介绍

talking-avatar-with-ai 是数字人3D领域的开源项目，由 asanchezyali 开发，2024 年首次发布。

它收录于数字人3D分类，该分类目前共有 272 个项目，GitHub 星标数为 467。

项目保持着较活跃的维护节奏，最近一次代码更新于 2026-09-22。可自行部署，无在线服务，免费使用。

它主要面向的使用场景是：虚拟客服助手，提供语音交互服务。同类可对比的替代方案包括 HeyGen、SadTalker、Wav2Lip。

上一篇：DigiHuman

下一篇：dlp3d.ai