FastPitchFormant

分解音高与音色,让语音合成控制更精细

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 13 🐛 待处理 1 👀 关注 2
GitHub ↗
GitHub 星标 ★ 74
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

FastPitchFormant 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队keonlee9420
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型end-to-end,fastpitch,fastspeech,neural-tts,non-autoregressive,pitch,pitch-control,pytorch,speech-synthesis,text-to-speech,timbre,tts
GitHub 星标★ 74
上线时间2021-06-30 00:00:00
代码更新2021-08-03
仓库体积103.8 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数6

项目介绍

FastPitchFormant 是 NCSOFT 提出的 FastPitchFormant 模型的 PyTorch 非官方实现,该模型基于源-滤波器(source-filter)理论对语音合成进行分解建模。它解决传统端到端 TTS 中音高(pitch)与音色(formant)耦合导致音高控制不灵活、韵律自然度不足的问题。核心能力包括:将语音分解为激励源和声道滤波器两部分,分别建模,实现更精细的音高控制与韵律调节;支持非自回归快速合成,基于 FastPitch 架构,兼顾速度与质量;提供预训练模型和推理脚本,便于研究者复现和二次开发。项目面向语音合成研究者和开发者,适用于需要精细音高控制、多说话人韵律迁移或低延迟合成的场景。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 74

核心亮点

  • 基于源-滤波器分解,音高和韵律控制比传统端到端模型更灵活
  • 非自回归架构,合成速度快,适合实时应用
  • 提供预训练模型和推理代码,上手门槛低

不足之处

  • 文档/社区待观察
  • 依赖特定数据集,泛化性需验证

适用场景

  • 需要精细控制合成语音音高和语调的配音或内容生成
  • 多说话人语音合成中的韵律迁移与风格控制
  • 低延迟实时语音合成系统(如虚拟助手、游戏NPC)

替代项目

FastPitch、FastSpeech 2、VITS

上一篇:edge-tts-extension

下一篇:BokeBox

同类项目推荐

speaker_adapted_tts 开源

1分钟语音样本,10分钟训练出你的专属TTS模型

Making a TTS model with 1 minute of speech samples within 10 minutes

★ 184 2026-08-09
TTS 开源

训练并部署高拟真语音合成模型,轻松打造专属声音

:robot: :speech_balloon: Deep learning for Text to Speech (Discussion forum: https:···

★ 10187 2026-08-09
EDDiscovery 开源

记录你的星际航迹,用3D星图回放《精英危险》的每一段旅程。

Captains log and 3d star map for Elite Dangerous

★ 908 2026-08-09
SummerTTS 开源

一键编译,离线运行,零依赖的中英文语音合成。

SummerTTS 是一个基于C++的独立编译的中文和英文语音合成项目,可以本地运行不需要网络,而···

★ 545 2026-08-09
VITS-Pytorch 开源

一键训练端到端语音合成模型,无需复杂对齐

本项目是基于Pytorch的语音合成项目,使用的是VITS,VITS是一种语音合成方法,这种时端到端···

★ 60 2026-08-09
ComfyUI-Drama3 开源

在 ComfyUI 里直接做声音克隆和多角色配音

Fish Audio Drama 3 text to speech, natively in ComfyUI: voice cloning, dialogue and ···

★ 167 2026-10-28
sonata-nvda 开源

给 NVDA 装上神经语音,让屏幕阅读更自然

This add-on implements a speech synthesizer driver for NVDA using neural TTS models.···

★ 74 2026-08-09
SoniTranslate 开源

上传视频,自动生成多语言配音,轻松出海

Synchronized Translation for Videos. Video dubbing

★ 1424 2026-08-09
iSTFTNet-pytorch 开源

用 iSTFT 加速声码器,轻量快速合成高质量语音

iSTFTNet : Fast and Lightweight Mel-spectrogram Vocoder Incorporating Inverse Short-···

★ 281 2026-08-09