bark-voice-cloning-HuBERT-quantizer

用几秒语音克隆音色,训练推理全搞定

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 115 🐛 待处理 16 👀 关注 19
GitHub ↗
GitHub 星标 ★ 711
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

bark-voice-cloning-HuBERT-quantizer 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队gitmylo
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型ai,neural-networks,text-to-speech,voice-cloning,voice-conversion
GitHub 星标★ 711
上线时间2023-05-11 00:00:00
代码更新2023-09-13
仓库体积319.8 MB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数9

项目介绍

这是一个用于声音克隆的开源项目,基于Bark模型和HuBERT量化器实现。它解决的核心问题是:如何用少量样本(甚至几秒钟的语音)克隆出特定音色,并用于文本到语音合成。项目提供了完整的训练和推理代码,用户可以自定义数据集训练自己的声音克隆模型。其核心能力包括:利用HuBERT将语音转换为离散的语义token,再通过Bark的生成能力合成带有目标音色的语音;支持语音转换(voice conversion)和文本到语音(TTS)两种模式;代码结构清晰,便于二次开发和实验。该项目适合研究人员和开发者探索个性化语音合成,尤其在低资源声音克隆场景下具有实用价值。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 711

使用教程

ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。

难度:进阶 约 45 分钟 部署方式:本地安装 4 步

环境要求

  • Python 3.10
  • GPU 建议
  • 语音素材

安装与启动步骤

  1. 1确认版本

    它只在 Python 3.10 上验证过。

    python --version
  2. 2克隆

    先拉代码。

    # 从仓库首页克隆
  3. 3装依赖

    按清单装,注意音频相关包。

    pip install -r requirements.txt
  4. 4训量化器

    先训 Hubert 量化器再接 Bark。

    # 运行训练脚本

如何确认成功

用少量素材克隆出的音色与原声接近。

注意事项

  • 老版本 Python 有兼容问题,别升版本。
  • 素材干净程度决定克隆效果。

核心亮点

  • 基于Bark和HuBERT,技术路线新颖,克隆效果自然
  • 提供完整训练和推理代码,上手门槛低
  • 支持少量样本克隆,适合个性化语音合成

不足之处

  • 文档/社区待观察
  • 依赖Bark模型,推理速度可能较慢

适用场景

  • 个性化语音助手定制
  • 有声书或播客配音克隆
  • 语音转换实验和研究

替代项目

Coqui TTS、OpenVoice、so-vits-svc

上一篇:glow-tts

下一篇:kokoro-web

同类项目推荐

JJazzLab 开源

输入和弦,一键生成专业级伴奏,让练琴和创作不再孤单。

A complete and open application for automatic backing tracks generation.

★ 612 2026-08-09
Podcini 开源

一个应用同时听播客和 YouTube 音频,告别来回切换。

Open source podcast instrument for Android supporting contents from YouTube and YT M···

★ 238 2026-08-09
audio-webui 开源

一个网页搞定多种音频AI,不用写代码就能玩转音乐生成和语音合成

A webui for different audio related Neural Networks

★ 1246 2026-08-09
NVDA-IBMTTS-Driver 开源

让 NVDA 用上经典 IBMTTS 语音,听感更自然

This project is aimed at developing and maintaining the NVDA IBMTTS driver. IBMTTS i···

★ 80 2026-08-09
xcodec 开源

让音频语言模型听懂语义,生成更准的语音和音乐

AAAI 2025: Codec Does Matter: Exploring the Semantic Shortcoming of Codec for Audio ···

★ 316 2026-08-09
audio-diffusion 开源

像画图一样生成音乐,给段描述就出专属旋律

Apply diffusion models using the new Hugging Face diffusers package to synthesize mu···

★ 795 2026-08-09
aeneas 开源

上传音频和文本,自动生成逐字字幕时间轴

aeneas is a Python/C library and a set of tools to automagically synchronize audio a···

★ 2874 2026-08-09
vits2 开源

一条流水线生成自然语音,又快又像真人

VITS2: Improving Quality and Efficiency of Single-Stage Text-to-Speech with Adversar···

★ 648 2026-08-09
TalkifyTTS 开源

让 Android 应用秒变 AI 播音员,多模型任选

云端大模型驱动的 Android 语音合成应用(TTS引擎)。支持ChatGPT、Gemini、豆包、腾讯、微···

★ 387 2026-08-09