ControlSpeech

几秒克隆音色,同时随心控制说话风格

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 14 🐛 待处理 6 👀 关注 12
GitHub ↗
GitHub 星标 ★ 278
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,本地部署,完全免费。

项目预览

ControlSpeech 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队jishengpeng
定价模式🏷️完全免费
价格说明开源项目,本地部署,完全免费。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Python
技术栈/模型controlspeech,instructtts,promptstyle,prompttts,text-to-speech
GitHub 星标★ 278
上线时间2024-06-02 00:00:00
代码更新2024-11-22
仓库体积80.1 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数8

项目介绍

ControlSpeech 是一个基于 ACL 2025 论文的零样本语音克隆与语言风格控制开源项目。它解决的核心问题是:传统语音合成模型难以同时实现说话人音色克隆和语言风格(如情感、语速、韵律)的灵活控制,且通常需要大量参考音频。ControlSpeech 采用解耦编解码器架构,将说话人特征与风格特征分离,允许用户仅用极短的参考音频(如几秒)克隆音色,同时通过文本指令或风格提示独立控制语言风格,实现两者同步生成。项目提供完整的训练和推理代码,支持自定义数据集,并内置预训练模型。其核心能力包括零样本说话人克隆、细粒度风格控制、以及高自然度的语音合成,适用于个性化语音助手、有声内容创作、游戏角色配音等场景。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 278

技术标签

核心亮点

  • 解耦编解码器架构,音色与风格独立控制,互不干扰
  • 零样本克隆,仅需数秒参考音频即可复刻说话人音色
  • 支持风格提示和文本指令,灵活控制情感、语速等韵律特征

不足之处

  • 早期项目,文档和社区支持尚待完善
  • 模型训练资源要求较高,普通用户难以快速上手

适用场景

  • 个性化语音助手,定制专属音色和说话风格
  • 有声书或播客制作,快速生成不同角色配音
  • 游戏或动画角色配音,实现风格化语音输出

替代项目

XTTS、OpenVoice、CosyVoice

上一篇:tetos

下一篇:kokoro-ios

同类项目推荐

expo-kokoro-onnx 开源

在 Expo 应用中离线运行 Kokoro TTS,一句话实现本地语音合成。

Run Kokoro TTS locally on device using Expo & ONNX Runtime

★ 96 2026-08-09
codename-rvc-fork-4 开源

一键克隆音色,实时转换歌声,创作更自由

Codename's rvc fork version 4, based on Applio.

★ 53 2026-08-09
AivisSpeech-Engine 开源

上传声音样本,即刻生成日文语音,还能模仿音色。

AivisSpeech Engine: AI Voice Imitation System - Text to Speech Engine

★ 185 2026-08-09
unspeech 开源

一个 API 接入所有 TTS 服务,自托管轻松切换

️ Your Text-to-Speech Services, All-in-One.

★ 109 2026-08-09
talkie 开源

选中文案,一键朗读,让网页开口说话。

Text-to-speech browser extension button. Select text on any web page, and have the c···

★ 80 2026-08-09
StyleTTS 开源

用风格迁移让AI语音更有情感和表现力

Official Implementation of StyleTTS

★ 467 2026-08-09
Parallel-Tacotron2 开源

让语音合成告别逐字生成,并行提速数十倍

PyTorch Implementation of Google's Parallel Tacotron 2: A Non-Autoregressive Neural ···

★ 191 2026-08-09
kokoro-web 开源

免费自托管AI语音合成,OpenAI接口一键接入

Kokoro Web: Free AI text-to-speech, online or self-hosted, OpenAI compatible!

★ 764 2026-08-09
AdaSpeech 开源

用少量样本快速定制专属语音合成模型

AdaSpeech: Adaptive Text to Speech for Custom Voice

★ 162 2026-08-09