gmvae_tacotron

用高斯混合潜变量提升语音韵律表现力,生成更自然的合成语音

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 11 🐛 待处理 5 👀 关注 4
GitHub ↗
GitHub 星标 ★ 54
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,无付费版本。

项目预览

gmvae_tacotron 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队rishikksh20
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,无付费版本。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型tacotron,tacotron-2,tts
GitHub 星标★ 54
上线时间2019-02-09 00:00:00
代码更新2023-07-06
仓库体积58 KB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数6

项目介绍

gmvae_tacotron 是一个基于高斯混合变分自编码器(GM-VAE)与 Tacotron 结合的语音合成实验项目。它旨在解决传统 Tacotron 在韵律建模上的不足,通过引入高斯混合潜变量来捕捉语音中更丰富的韵律变化,从而生成更具表现力和自然度的语音。项目核心能力包括:利用 VAE 的潜空间建模能力对语音韵律进行细粒度控制,结合 Tacotron 的序列到序列架构实现文本到梅尔频谱的转换,并支持对合成语音的韵律风格进行调节。该实现基于 Python,主要依赖 TensorFlow 等深度学习框架,代码结构清晰,适合作为语音合成研究方向的参考实现。尽管项目处于早期阶段,但为探索韵律建模提供了新的思路。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 54

技术标签

核心亮点

  • 创新性地将高斯混合 VAE 引入 Tacotron,针对韵律建模这一痛点提出新方案
  • 代码结构清晰,便于研究者快速理解并复现实验
  • 提供了对合成语音韵律风格的调节能力,扩展了 Tacotron 的灵活性

不足之处

  • 项目处于早期阶段,文档和示例较少,上手门槛较高
  • 未提供预训练模型或完整训练指南,复现成本较大

适用场景

  • 语音合成研究中探索韵律建模的新方法
  • 需要生成具有特定情感或风格语音的 TTS 系统开发
  • 作为 VAE 与序列生成模型结合的学术实验平台

替代项目

Tacotron 2、FastSpeech、VALL-E

上一篇:TurkicTTS

下一篇:tacotron2-mandarin

同类项目推荐

Turkish-Text-to-Speech 开源

用 Fastpitch + HiFi-GAN 为土耳其语打造自然语音合成

Speech synthesis (TTS) in low-resource languages by training from scratch with Fastp···

★ 72 2026-08-09
pdf-narrator 开源

把 PDF/EPUB 一键变成有声书,低配电脑也能流畅跑

Convert your PDFs and EPUBs into audiobooks effortlessly. Features intelligent text ···

★ 218 2026-08-09
AuK 开源

一个模型搞定语音生成、编辑与分离

AuK: An Open-Source Foundational Model for Speech Generation and Editing

★ 1589 2026-09-13
htgo-tts 开源

Go 语言里几行代码生成语音,无需外部服务

Text to speech package for Golang.

★ 219 2026-08-09
tts 开源

几行 Python 代码,把文字变成自然语音

Inworld TTS

★ 766 2026-10-25
blossom 开源

点点画画,即刻生成你的专属旋律

A lovely interactive music generator

★ 249 2026-08-09
voice-builder 开源

拖拽式搭建自定义语音,快速生成 TTS 模型

An opensource text-to-speech (TTS) voice building tool

★ 688 2026-08-09
audio-development-tools 开源

一站式音频开发工具箱,从信号处理到AI生成全搞定

Audio Development Tools (ADT) is a project for advancing sound, speech, and music te···

★ 475 2026-08-09
RapidTTS 开源

本地快速语音合成,多模型一键切换,低延迟高音质。

轻量级文本转语音工具,面向本地快速推理。A text-to-speech framework for fast and high···

★ 56 2026-08-09