项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 501
技术标签
使用教程
环境要求
- CUDA 显卡
- 实时通信服务
- 模型凭据
安装与启动步骤
-
1拉仓库
它把实时语音对话的几个组件串起来。
git clone https://github.com/YeJe-cpu/talk-to-fengge.git -
2装实时通信组件
语音链路依赖一个实时通信服务。
brew install livekit -
3跑部署脚本
首次会下模型,耗时较长。
bash runpod_setup.sh -
4按终端顺序起服务
它把流程拆成几个终端分别起。
LLM_PROVIDER=minimax python -m worker.main start -
5起网页服务
最后一个终端起界面。
python -m worker.web_server
如何确认成功
能完成一次端到端语音对话,延迟在一秒左右且被打断时能立刻停止播报
注意事项
- 它做的是实时语音对话,声音与语气都来自克隆,不是简单文字转语音。
- 流程拆成多个终端分别起,少一个链路就断。
- 首次跑要下模型,时间要留够。
- **克隆他人声音涉及人格权与肖像权,公开使用必须取得授权。**
核心亮点
- 工程延迟低于1秒,对话流畅无卡顿
- 支持声音与性格双重克隆,交互更具个性
- 基于LiveKit等成熟技术栈,实时通信稳定
不足之处
- 早期项目,文档和社区支持待观察
- 声音克隆效果依赖输入样本质量,可能不稳定
适用场景
- 个性化语音助手定制
- 虚拟偶像或角色实时互动
- 沉浸式语音聊天应用
替代项目
OpenVoice、ChatTTS、Coqui TTS
同类项目推荐
DiffGAN-TTS
开源
用扩散+GAN,几步生成高保真语音,又快又真
PyTorch Implementation of DiffGAN-TTS: High-Fidelity and Efficient Text-to-Speech wi···
react-speech-highlight-demo
开源
让文字跟着语音走,边听边读不迷路
React / Vanilla JS Text to Speech with highlighting the words and sentences that are···
ComfyUI-VoxCPM2
开源
在 ComfyUI 里直接做多语言语音合成和克隆,还能训练 LoRA
VoxCPM2 TTS for ComfyUI. 30 languages, voice design, controllable cloning, 48kHz aud···
Bert-VITS2-MNN
开源
把 Bert-VITS2 塞进手机,离线也能自然发声
A practical on-device BertVITS2 runtime for Android, powered by alibaba-MNN engine···
Parallel-Tacotron2
开源
让语音合成告别逐字生成,并行提速数十倍
PyTorch Implementation of Google's Parallel Tacotron 2: A Non-Autoregressive Neural ···
CoMoSpeech
开源
一步合成语音和歌声,告别扩散模型慢速采样
ACM MM 2023 CoMoSpeech: One-Step Speech and Singing Voice Synthesis via Consistency ···
csm-voice-cloning
开源
上传几秒音频,快速克隆音色并生成自然语音
Sesame CSM 1B Voice Cloning
pflowtts_pytorch
开源
用 flow matching 快速生成自然语音,复现 NVIDIA 论文效果
Unofficial implementation of NVIDIA P-Flow TTS paper
ACE-Step-1.5
开源
本地跑文本生成音乐,Mac/AMD/Intel 都能用
The most powerful local music generation model that outperforms almost all commercia···
