hifi-gan

让语音合成又快又真,实时生成高保真音频

HiFi-GAN 是一个基于生成对抗网络的高保真语音合成声码器,由韩国首尔大学团队开发。它解决了传统神经声码器(如 WaveNet)推理速度慢、难以实时部署的问题,同时保持极高的音频质量。核心能力包括:将梅尔频谱图高效转换为原始波形,支持多说话人、多语言场景,并提供预训练模型。其创新点在于使用多周期判别器(MPD)和多尺度判别器(MSD)来捕捉音频的周期性和全局结构,配合对抗训练与辅助损失,实现了在单张 V100 GPU 上比实时快 22.9 倍的合成速度,且音质接近自然语音。项目代码清晰,基于 PyTorch 实现,易于集成到 TTS 系统中,是学术界和工业界广泛使用的 vocoder 基线。

开源 free 音频音乐
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 2371
维护状态 低维护
是否开源
定价模式 free

项目数据

分类音频音乐
开发团队jik876
所属国家
官网地址
定价模式free
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态
是否开源
开源协议MIT
主要语言Python
技术栈/模型deep-learning,gan,hifi-gan,pytorch,speech-synthesis,text-to-speech,tts,vocoder
GitHub 星标★ 2371
30天Star增速
HF 下载量
上线时间2020-10-14 00:00:00
最近更新2026-09-21 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数5

使用教程

难度:进阶 约 20 分钟 部署方式:库/依赖 4 步

⚠ 该项目 README 未提供完整安装说明,以下步骤为通用流程,请以官方文档为准。

环境要求

  • Python 环境(README 仅说明项目基于 PyTorch 实现,未给出具体版本)
  • PyTorch 深度学习框架
  • 可选:支持 CUDA 的 GPU(README 提及 V100 上的合成速度)
  • 可从仓库获取已开源的实现代码与预训练模型

安装与启动步骤

  1. 1克隆项目代码

    从 GitHub 拉取 hifi-gan 源码到本地,README 未提供其他获取方式。

    git clone https://github.com/jik876/hifi-gan
  2. 2进入项目目录

    进入克隆后的目录,后续依赖安装与运行都建议在该目录内进行。

    cd hifi-gan
  3. 3配置运行环境

    README 节选未给出安装命令,仅说明基于 PyTorch 实现,请依据仓库内实际文件安装 Python 与 PyTorch 环境。

  4. 4确认预训练模型

    README 说明仓库开源提供预训练模型,克隆完成后可检查相关模型文件是否齐全。

如何确认成功

README 未给出启动验证方法;可检查仓库中是否已包含可运行的实现代码与预训练模型文件。

常见问题

Q:训练或推理需要什么显卡?

A:README 提及在单张 V100 GPU 上生成 22.05 kHz 高保真音频,速度达实时的 167.9 倍;小体积版本在 CPU 上也可达实时的 13.4 倍。

Q:支持哪些采样率?

A:README 中明确提到生成 22.05 kHz 高保真音频,其他采样率信息 README 节选未给出。

Q:是否提供预训练模型?

A:README 说明作者将实现代码和预训练模型一并开源在该仓库中,无需自行训练即可使用。

Q:支持多说话人和未见过的说话人吗?

A:README 提到该方法可用于未见说话人的梅尔频谱反演以及端到端语音合成,具备一定泛化性。

注意事项

  • README 节选未包含安装步骤,具体依赖版本与命令请以仓库内实际文件为准,本教程只保留可确认的通用准备动作
  • 项目基于 PyTorch 实现,运行前需自行准备好深度学习环境
  • README 强调其核心优势是推理效率高、音质接近自然语音,适合作为 TTS 系统的声码器组件

核心亮点

  • 合成速度极快,单 GPU 上远超实时,适合低延迟场景
  • 音质接近自然语音,MOS 评分高,优于多数同期 vocoder
  • 代码结构清晰,基于 PyTorch,附带预训练模型,易上手集成

不足之处

  • 训练资源消耗大,需要多 GPU 和大量音频数据
  • 对未见说话人泛化能力有限,需微调
  • 文档/社区待观察

适用场景

  • TTS 系统中的声码器环节,将频谱转为波形
  • 实时语音交互(如语音助手、游戏配音)
  • 音频超分辨率或语音修复任务

替代项目

WaveGlow、MelGAN、Parallel WaveGAN

项目介绍

hifi-gan 是音频音乐领域的开源项目,由 jik876 开发,2020 年首次发布。

在全站 13,014 个收录项目中,它的 GitHub 星标数(2,371)位列前 30%,在音频音乐分类的 738 个项目里位列前 9%。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-21。MIT许可证,完全免费,可自行部署使用。

它主要面向的使用场景是:TTS系统中的声码器环节,将频谱转为波形。同类可对比的替代方案包括 WaveGlow、MelGAN、Parallel WaveGAN。

上一篇:pyttsx3

下一篇:Tacotron-2

同类项目推荐

tango 开源

输入一句话,自动生成匹配的音频内容

A family of diffusion models for text-to-audio generation.

★ 1239 2026-08-09
AuK 开源

一个模型搞定语音生成、编辑与分离

AuK: An Open-Source Foundational Model for Speech Generation and Editing

★ 1236 2026-09-13
swift-tts 开源

Swift 项目三行代码接入系统 TTS,兼容 TCA 和 Combine

A straightforward package containing version for Swift modern concurrency, Point-Fre···

★ 52 2026-08-09
ai-dj 开源

现场演出中实时用 AI 生成音乐,保持人类掌控

AI music generation for live performance - Standalone (Ableton Link) + VST3/AU. 8 tr···

★ 245 2026-08-09