SpeechPrompt

用提示学习统一搞定多种语音任务,无需重训模型

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 9 🐛 待处理 2 👀 关注 6
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 102
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,无在线服务,需自行部署,完全免费。

项目预览

SpeechPrompt 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队ga642381
定价模式🏷️完全免费
价格说明开源项目,无在线服务,需自行部署,完全免费。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Python
技术栈/模型deep-learning,large-language-models,nlp,prompt,prompting,pytorch,speech-processing
GitHub 星标★ 102
上线时间2022-04-01 00:00:00
代码更新2025-04-10
仓库体积50.5 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数5

项目介绍

SpeechPrompt 是 Interspeech 2022 论文的官方实现,探索将提示学习(Prompt Tuning)应用于生成式口语语言模型,以统一方式处理多种语音处理任务。传统语音任务需要针对每个任务设计专门模型,而 SpeechPrompt 借鉴 NLP 中提示学习的思路,将语音信号视为离散单元序列,通过构造提示模板让预训练生成模型直接输出任务结果,从而无需为每个任务重新训练模型。项目核心能力包括:支持语音分类、情感识别、说话人验证等任务的统一建模,提供基于预训练模型的提示调优训练代码和推理脚本。它解决了语音领域任务碎片化、模型复用难的问题,展示了生成式模型在语音处理中的新范式。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 102

核心亮点

  • 创新性地将 NLP 提示学习引入语音处理,统一多任务建模
  • 基于预训练生成式口语模型,减少下游任务训练成本
  • 附有论文和代码,复现门槛低,适合学术研究

不足之处

  • 项目处于早期,文档和社区支持待观察
  • 仅支持有限的语音任务,实际应用范围有限

适用场景

  • 学术研究:探索语音提示学习新范式
  • 多任务语音处理:用单一模型完成分类、情感识别等
  • 低资源场景:减少针对每个任务的数据标注和训练

替代项目

SpeechBrain、ESPnet、HuggingFace Transformers

上一篇:MLC-SLM-Baseline

下一篇:GigaAM

同类项目推荐

WhisperLive 开源

让 Whisper 实时转写,直播字幕、会议记录秒出

A nearly-live implementation of OpenAI's Whisper.

★ 4353 2026-08-09
VoiceInk 开源

按快捷键说话,文字直接落到光标处

The best open-source alternative to Superwhisper & Wispr Flow. Voice-to-text app for···

★ 7062 2026-10-27
Easy-Voice-Toolkit 开源

一句话搞定语音识别、转写和去噪,小白也能上手

A user-friendly toolkit for voice recgonition/transcription/conversion etc. | 简单易···

★ 871 2026-08-09
Typeleast 开源

按快捷键说话,本地识别加大模型润色,直接写进光标处

TypeLeast:按一下快捷键说话,本机识别(SenseVoice),用你自己的大模型 API Key 整理成···

★ 121 2026-11-08
blitztext-app 开源

按一下说话,松手文字就出现在光标处

Local-first dictation for macOS. Speak, text, done. Parakeet or Whisper on your Mac,···

★ 267 2026-10-14
whisper-website 开源

上传音频,浏览器里直接出字幕文件

Self-hosted web application, which can be used to convert audio to subtitles by Open···

★ 325 2026-09-23
Speech-to-Text-Russian 开源

本地跑俄语语音转文字,不依赖云 API

Распознавание русской речи: библиотека Python, CLI···

★ 352 2026-10-11
MLC-SLM-Baseline 开源

多语言对话语音识别与说话人日志的官方基线,开箱即用

The project is associated with the recently-launched INTERSPEECH 2025 Workshop on Mu···

★ 51 2026-08-09