learnable-speech

无需对齐,快速实现跨语言语音合成与克隆

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 8 🐛 待处理 1 👀 关注 7
GitHub ↗
GitHub 星标 ★ 56
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,本地部署,完全免费

项目预览

learnable-speech 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队primepake
定价模式🏷️完全免费
价格说明开源项目,本地部署,完全免费
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Python
技术栈/模型audio,cross-lingual,llm,speech,text-to-speech,texttospeech,tts,vae,voice,voice-clone,voice-conversion
GitHub 星标★ 56
上线时间2025-06-28 00:00:00
代码更新2025-09-20
仓库体积4.1 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数3

项目介绍

learnable-speech 是一个基于可学习音频编码器的文本转语音(TTS)项目,无需与文本参考对齐即可实现语音合成。它解决了传统 TTS 系统依赖音素对齐或参考音频片段的问题,通过 VAE 等可学习编码器直接建模语音特征,支持跨语言合成和声音克隆。核心能力包括:从文本生成自然语音、零样本声音克隆、语音转换,并集成了 LLM 提升语义理解。项目处于早期阶段,代码以 Python 为主,适合研究语音生成和探索新型 TTS 架构。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 56

核心亮点

  • 创新性地使用可学习音频编码器,摆脱了对齐依赖,简化了 TTS 流程
  • 支持跨语言和声音克隆,扩展了应用场景
  • 集成 VAE 和 LLM,技术栈前沿,便于二次开发

不足之处

  • 项目处于早期,文档和示例较少,上手门槛较高
  • 依赖较新的模型和框架,对硬件资源要求可能较高

适用场景

  • 研究新型 TTS 架构和语音编码方法
  • 快速原型验证跨语言语音合成
  • 教育场景中演示语音生成技术

替代项目

VITS、Tacotron2、FastSpeech2

上一篇:fe-pilot

下一篇:codename-rvc-fork-4

同类项目推荐

vibevoice-studio 开源

录段声音,就能用你的声音说话

Beautiful voice app: record or upload to train a voice, generate speech from text or···

★ 65 2026-08-09
supertonic-py 开源

本地极速语音合成,离线也能开口说话

Lightning-Fast, On-Device TTS — running natively via ONNX.

★ 85 2026-08-09
OmniVoice 开源

一段参考音频,克隆音色说600+种语言

High-Quality Voice Cloning TTS for 600+ Languages

★ 16409 2026-10-25
xttsv2-vllm-streaming-server 开源

让 XTTS-v2 实时说话,0.5 秒首响,即插即用

Real-time streaming TTS server for XTTS-v2 on vLLM — OpenAI-compatible API, ~0.5s T···

★ 8 2026-08-09
NaturalVoiceSAPIAdapter 开源

让老软件用上 Azure 自然语音,即插即用

Make Azure natural TTS voices accessible to any SAPI 5-compatible application.

★ 1016 2026-08-09
sonata 开源

用 Rust 跑神经 TTS,跨平台、轻量、可嵌入

A cross-platform inference engine for neural TTS models.

★ 75 2026-08-09
midi2voice 开源

上传 MIDI,一键生成人声演唱,快速试听旋律效果。

Singing synthesis from MIDI file

★ 286 2026-08-09
PyThaiTTS 开源

用 Python 快速生成自然泰语语音,离线可用

Open Source Thai Text-to-speech library in Python

★ 116 2026-08-09
xtts-webui 开源

可视化操作XTTS,零代码实现语音合成与微调

Webui for using XTTS and for finetuning it

★ 900 2026-08-09