TalkNet2-pytorch

快速训练轻量级语音合成模型,显式控制音高和时长

TalkNet2-pytorch 是 TalkNet 2 的非官方 PyTorch 实现,TalkNet 2 是一种用于语音合成的非自回归模型,通过深度可分离卷积显式预测音高和时长。它解决传统自回归 TTS 模型生成速度慢、稳定性不足的问题,核心能力包括:基于音高和时长的显式预测实现可控语音合成,采用非自回归架构提升合成速度,并利用深度可分离卷积降低计算量。项目提供模型训练和推理的 PyTorch 代码,适合研究快速、轻量级 TTS 方案。

开源 free 音频音乐
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 90
维护状态 低维护
是否开源 是
定价模式 free

项目数据

分类音频音乐
开发团队rishikksh20
所属国家
官网地址
定价模式free
价格说明开源项目,MIT许可证,可免费使用和修改,无在线服务或付费版本。
访问状态
是否开源是
开源协议MIT
主要语言Python
技术栈/模型pytorch,speech,speech-synthesis,text-to-speech,tts
GitHub 星标★ 90
30天Star增速
HF 下载量
上线时间2021-04-19 00:00:00
最近更新2026-09-09 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数3

使用教程

核心亮点

  • 非自回归架构显著提升合成速度,适合实时场景
  • 显式预测音高和时长,便于控制语音韵律
  • 深度可分离卷积降低参数量和计算成本

不足之处

  • 文档/社区待观察
  • 早期项目,功能可能不完善

适用场景

  • 研究非自回归 TTS 架构
  • 低资源设备上的语音合成
  • 需要精细控制音高和时长的语音生成

替代项目

Tacotron2、FastSpeech2、VITS

项目介绍

TalkNet2-pytorch 是音频音乐领域的开源项目,由 rishikksh20 开发,2021 年首次发布。

它收录于音频音乐分类,该分类目前共有 738 个项目,GitHub 星标数为 90。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-09。MIT许可证,可免费使用和修改,无在线服务或付费版本。

它主要面向的使用场景是:研究非自回归TTS架构。同类可对比的替代方案包括 Tacotron2、FastSpeech2、VITS。

上一篇:DiffWave-Vocoder

下一篇:TTS-recipes

同类项目推荐

tango 开源

输入一句话,自动生成匹配的音频内容

A family of diffusion models for text-to-audio generation.

★ 1239 2026-08-09
AuK 开源

一个模型搞定语音生成、编辑与分离

AuK: An Open-Source Foundational Model for Speech Generation and Editing

★ 1236 2026-09-13
swift-tts 开源

Swift 项目三行代码接入系统 TTS,兼容 TCA 和 Combine

A straightforward package containing version for Swift modern concurrency, Point-Fre···

★ 52 2026-08-09
ai-dj 开源

现场演出中实时用 AI 生成音乐,保持人类掌控

AI music generation for live performance - Standalone (Ableton Link) + VST3/AU. 8 tr···

★ 246 2026-08-09