AlphaAvatar
像搭积木一样拼出能听会说有记忆的实时数字人
AlphaAvatar 是一个基于 LiveKit 构建的实时交互式全模态数字人框架,目标是把数字人拆解成可插拔的开源组件,让开发者自由组合实时模型、视觉形象、语音、记忆、搜索等模块。它解决的是传统数字人方案封闭、耦合度高、难以替换单个能力的问题:你可以在 LiveKit 的实时音视频通道上,把 LLM、TTS/ASR、视觉驱动、长期记忆和联网搜索分别接入,形成能听、能说、能看、能记、能查的虚拟角色。核心能力包括实时语音对话、多模态感知与表达、记忆与反思机制、搜索增强,以及通过插件方式接入任意开源 Avatar 组件。项目用 Python 编写,面向需要快速搭建可定制数字人应用的开发者,适合做客服、陪伴、直播等场景的原型与产品。
项目数据
使用教程
核心亮点
- 基于 LiveKit 做实时音视频底座,延迟和并发有成熟方案支撑
- 组件化设计,模型、视觉、语音、记忆、搜索均可替换,不锁定单一供应商
- 内置记忆、反思与搜索能力,数字人不止会聊天,还能记住上下文并查资料
不足之处
- 早期项目,星标 815,生态和文档完善度仍在起步阶段
- 全模态链路涉及多个外部组件,实际部署与调参门槛不低
适用场景
- 搭建可换脸换声的实时虚拟主播或直播数字人
- 做有长期记忆的 AI 陪伴、心理疏导类虚拟角色
- 企业客服数字人,接入搜索与知识库做实时问答
替代项目
LiveTalking、Awesome-Digital-Human
项目介绍
上一篇:3DGenStudio
下一篇:没有了!
同类项目推荐
A3D
开源
在 three.js 里直接调用 AI 生成纹理和素材,边建模边生成
3D x AI hybrid editor, built with three.js
cube
开源
用一句话生成 3D 模型,在 Roblox 里快速落地 AI 创作
Roblox Foundation Model for 3D Intelligence
AG3D
开源
用2D图片直接生成3D虚拟人,告别昂贵扫描
Official code release for ICCV2023 paper AG3D: Learning to Generate 3D Avatars from ···
GameFactory-3A
开源
一条命令生成 3A 游戏资产,从模型到视频全自动
A comprehensive open-source 3A game-generation skill and asset framework.