GST-Tacotron

给语音合成装上风格旋钮,一句话控制情感语调

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 70 🐛 待处理 10 👀 关注 12
GitHub ↗
GitHub 星标 ★ 374
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

GST-Tacotron 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队KinglittleQ
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型gst-tacotron,pytorch,tacotron,tts
GitHub 星标★ 374
上线时间2018-05-26 00:00:00
代码更新2022-12-08
仓库体积29.6 MB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

GST-Tacotron 是一个基于 PyTorch 实现的端到端语音合成系统,核心是引入全局风格令牌(GST)机制,实现对语音风格的无监督建模、控制和迁移。它解决了传统 Tacotron 只能合成单一中性语音、无法灵活控制情感、语调等风格属性的问题。通过将参考音频编码为一组可学习的风格嵌入,模型能够自动捕捉语速、音高、情感等风格特征,并支持在合成时通过指定风格令牌或参考音频来调整输出语音的风格。项目包含完整的训练、合成和风格迁移示例代码,支持多说话人数据(如 LibriTTS),并提供了预训练模型和可视化工具,方便研究者快速复现和扩展。核心能力包括:无监督风格提取、风格控制(通过令牌权重调整)、跨说话人风格迁移。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 374

技术标签

核心亮点

  • 首次将 GST 机制引入 Tacotron,实现无监督风格建模,无需人工标注风格标签
  • 支持风格令牌权重插值,可精细控制语速、情感等维度
  • 提供完整的训练、合成和迁移脚本,并附带预训练模型,上手门槛低

不足之处

  • 项目基于较早的 Tacotron 版本,未集成 WaveGlow 等神经声码器,音质受限
  • 文档和社区维护较少,依赖库较旧,在新环境上复现可能遇到兼容性问题

适用场景

  • 研究语音风格迁移和情感合成的学术实验
  • 构建可定制语音风格(如不同播报语气)的 TTS 原型
  • 教学演示端到端语音合成中的风格建模方法

替代项目

Tacotron2、FastSpeech2、VALL-E

上一篇:CDFSE_FastSpeech2

下一篇:AutoVocoder

同类项目推荐

TalkifyTTS 开源

让 Android 应用秒变 AI 播音员,多模型任选

云端大模型驱动的 Android 语音合成应用(TTS引擎)。支持ChatGPT、Gemini、豆包、腾讯、微···

★ 389 2026-08-09
tts 开源

一键接入文本转语音,快速生成自然语音输出

tts 服务

★ 643 2026-08-09
MOSS-Audio-Tokenizer 开源

把音频变成 token,让大模型能听会说

A 1.6B causal Transformer audio tokenizer with streaming, variable bitrates, and sem···

★ 264 2026-08-09
TTS 开源

让 Arduino 开口说话,几行代码实现语音播报

Arduino Text-to-Speech Library

★ 217 2026-08-09
rapping-neural-network 开源

用AI生成Kanye风格说唱歌词,输入开头即出完整段落

Rap song writing recurrent neural network trained on Kanye West's entire discography

★ 1067 2026-08-09
dectalk 开源

让 90 年代经典 DECtalk 语音在现代电脑上重新发声

Modern builds for the 90s/00s DECtalk text-to-speech application.

★ 473 2026-08-09
Breeze-TTS-2.cpp 开源

C++ 本地跑中英双语 TTS,带克隆和流式服务

Bilingual English and Mandarin text to speech in C++ and GGUF. Voice design, cloning···

★ 162 2026-11-06
HeadTTS 开源

浏览器里跑TTS,带时间戳和口型,直接做唇形同步

HeadTTS: Free neural text-to-speech (Kokoro) with timestamps and visemes for lip-syn···

★ 184 2026-08-09
qwen3-tts-apple-silicon 开源

在 Mac 上离线跑通 Qwen3-TTS,克隆音色、设计声音,一键生成。

Run Qwen3-TTS text-to-speech locally on Mac (M1/M2/M3/M4). Voice cloning, voice desi···

★ 590 2026-08-09