MSVAE

把音乐压成语义隐空间,理解、生成、重建一网打尽

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 3 👀 关注 3
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 199
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,定价信息待确认

项目预览

MSVAE 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队ASLP-lab
定价模式🏷️完全免费
价格说明开源项目,定价信息待确认
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
GitHub 星标★ 199
上线时间2026-05-06 00:00:00
代码更新2026-10-27
仓库体积512.8 MB
本站数据更新2026-10-29
维护状态活跃
收录时间2026-10-29
浏览次数0

项目介绍

MSVAE 是一个面向音乐语义的变分自编码器(VAE)开源项目,用 Python 实现,目标是把音乐音频压缩到具有语义意义的隐空间,并支持理解、生成与高保真重建三类任务。它解决的核心问题是:传统音频编解码器偏重波形还原,隐变量缺乏可解释的语义结构,难以直接用于音乐检索、风格分析或条件生成。MSVAE 通过语义约束的编码器-解码器结构,让隐表示既能承载音乐高层特征(如风格、情绪、结构),又能解码回高质量音频,从而在同一框架内打通分析、生成与重建。项目提供训练与推理代码,适合作为音乐 AI 研究的基础组件,用于音乐语义嵌入、隐空间插值生成、音频压缩重建等实验。当前星标约 199,属于早期项目,接口与文档仍在演进中,更适合研究者而非生产环境直接集成。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-10-29 · 当前星标 ★ 199

核心亮点

  • 隐空间带语义约束,可直接用于音乐理解与条件生成,而非只做波形压缩
  • 同一模型兼顾高保真重建与生成任务,减少多套编解码器的维护成本
  • 纯 Python 实现,代码结构清晰,便于研究者二次修改和做消融实验

不足之处

  • 早期项目,文档与预训练权重可能不完整,上手需读源码
  • 缺少大规模主观听感评测与下游任务基准,效果稳定性待验证

适用场景

  • 音乐语义嵌入与相似度检索研究
  • 基于隐空间插值的音乐片段生成实验
  • 音频压缩与高保真重建的对比研究

替代项目

EnCodec、MusicGen、RAVE

上一篇:smol-audio

下一篇:SpatialFlow

同类项目推荐

RapidTTS 开源

本地快速语音合成,多模型一键切换,低延迟高音质。

轻量级文本转语音工具,面向本地快速推理。A text-to-speech framework for fast and high···

★ 56 2026-08-09
csound-expression 开源

用 Haskell 写代码,生成电子音乐和声音合成。

Haskell Framework for Electronic Music

★ 338 2026-08-09
tts 开源

一行命令,用 Amazon Polly 把你的文字变成语音。

:pencil: :sound: A simple text-to-speech tool. Converts your text to speech with any···

★ 173 2026-08-09
awesome-audio-plaza 开源

每天更新音频AI论文,帮你紧跟音乐生成和语音合成前沿

Daily tracking of awesome audio papers, including music generation, zero-shot tts, a···

★ 410 2026-08-09
AudioMuse-AI 开源

声学分析自动挖掘曲库,生成智能歌单,找回被遗忘的好歌。

AudioMuse-AI uses sonic analysis to rediscover forgotten songs, uncover hidden conne···

★ 2820 2026-08-09
qwen3-tts-rs 开源

用 Rust 原生跑通 Qwen3-TTS,轻量部署高性能语音合成

Rust implementation of Qwen3-TTS speech synthesis

★ 150 2026-08-09
Tacotron-pytorch 开源

用 PyTorch 复现 Tacotron,快速搭建端到端语音合成模型

A Pytorch Implementation of Tacotron: End-to-end Text-to-speech Deep-Learning Model

★ 110 2026-08-09
ViSAudio 开源

给视频自动配上带方向感的双耳空间音效

ViSAudio: End-to-End Video-Driven Binaural Spatial Audio Generation

★ 118 2026-10-26
voice-pro 开源

一站式网页工具,轻松搞定语音合成、克隆与处理

Gradio WebUI for creators and developers, featuring key TTS (Edge-TTS, kokoro) and z···

★ 13382 2026-08-09