best-rq-pytorch

用随机投影量化器,轻松复现 Google 自监督语音预训练模型

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 12 🐛 待处理 12 👀 关注 6
GitHub ↗
GitHub 星标 ★ 140
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

best-rq-pytorch 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队lucasnewman
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型automatic-speech-recognition,speech-synthesis,text-to-speech
GitHub 星标★ 140
上线时间2023-09-25 00:00:00
代码更新2023-09-25
仓库体积374 KB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数3

项目介绍

BEST-RQ 是一种自监督语音表示学习模型,由 Google 提出,核心思想是用随机投影量化器(Random Projection Quantizer)替代传统对比学习中的负样本对,简化训练流程。本项目是其在 PyTorch 下的开源实现,旨在让研究者无需依赖 TensorFlow 或 Google 内部代码即可复现和实验。它解决的是语音预训练中标签依赖和训练复杂的问题,通过随机投影将连续语音特征离散化为 token,再配合掩码预测任务学习通用语音表征。项目提供模型定义、训练逻辑和基础工具,支持自动语音识别、语音合成等下游任务。代码结构清晰,适合作为学习自监督语音模型的参考实现。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 140

核心亮点

  • 忠实复现 Google 官方 BEST-RQ 架构,降低复现门槛
  • 纯 PyTorch 实现,便于集成到现有深度学习工作流
  • 代码简洁,适合作为自监督语音学习的研究起点

不足之处

  • 早期项目,文档和示例较少,上手需一定背景
  • 未提供预训练权重,需自行训练才能用于下游任务

适用场景

  • 学术研究:复现 BEST-RQ 并对比其他自监督方法
  • 语音预训练:为低资源语音任务生成通用表征
  • 教学演示:理解随机投影量化在自监督学习中的作用

替代项目

fairseq、wav2vec 2.0、HuBERT

上一篇:spokestack-python

下一篇:speech-android

同类项目推荐

OmniDictate 开源

本地实时语音打字,隐私安全,直接输入任何应用。

Free, open-source, real-time dictation for Windows. Runs locally (no cloud!), uses A···

★ 157 2026-08-09
phonikud 开源

给希伯来文本自动标音,让TTS发音更准

Hebrew grapheme to phoneme (INTERSPEECH 2026)

★ 124 2026-08-09
jev-voice 开源

说句话就能操控 Mac,本地识别不上传

Talk to your Mac. Local whisper.cpp + one Jev (TypeSafe) call per command + macOS au···

★ 136 2026-10-03
kesha-voice-kit 开源

让工具开口说话,本地语音快 19 倍

Kesha listens and talks back: local speech to text and text to speech for agents and···

★ 80 2026-08-09
transcribe.cpp 开源

本地跑 16 种语音识别模型,离线转文字又快又省

ggml speech-to-text inference for 16+ model families

★ 2149 2026-08-10
ostt 开源

按热键说话,终端里直接出文字并喂给AI或shell

Open source voice-to-text for the terminal. Record from a hotkey, transcribe with an···

★ 315 2026-09-24
awesome-voice-typing 开源

按平台找离线语音输入工具,一页搞定

Curated list of open-source speech-to-text and voice typing tools for Linux, macOS, ···

★ 214 2026-09-24