Video2Music

看懂视频情绪,自动生成配乐

Video2Music 是一个基于情感多模态 Transformer 模型的视频配乐生成工具,旨在解决视频自动生成适配音乐的问题。它通过分析视频中的视觉内容(如场景、动作、情绪)和音频线索,利用深度学习模型提取情感特征,并据此生成与视频情感基调相匹配的音乐。核心能力包括:多模态情感理解、音乐生成、以及视频-音乐对齐。项目提供了完整的训练和推理代码,支持自定义数据集,适用于影视制作、短视频创作、游戏开发等场景,可显著降低人工配乐成本。

开源 free 音频音乐
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 199
维护状态 低维护
是否开源
定价模式 free

项目数据

分类音频音乐
开发团队AMAAI-Lab
所属国家
定价模式free
价格说明开源项目,MIT许可证,免费使用,需自行部署。
访问状态
是否开源
开源协议MIT
主要语言Python
技术栈/模型affective-computing,ai,deep-learning,multimodal,music-generation
GitHub 星标★ 199
30天Star增速
HF 下载量
上线时间2023-10-13 00:00:00
最近更新2026-08-26 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数3

使用教程

核心亮点

  • 多模态情感分析:结合视觉和音频特征,精准捕捉视频情绪
  • 基于 Transformer 的先进模型架构,生成音乐情感匹配度高
  • 提供完整训练与推理流程,支持自定义数据集扩展

不足之处

  • 项目早期,文档和社区支持待观察
  • 生成音乐质量可能受限于训练数据规模,需自行调优

适用场景

  • 短视频创作者自动生成背景音乐
  • 影视后期制作快速生成配乐草稿
  • 游戏开发中为过场动画生成情感音乐

替代项目

Mubert、AIVA、Magenta Studio

项目介绍

Video2Music 是音频音乐领域的开源项目,由 AMAAI-Lab 开发,2023 年首次发布。

它收录于音频音乐分类,该分类目前共有 738 个项目,GitHub 星标数为 199。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-08-26。MIT许可证,免费使用,需自行部署。

它主要面向的使用场景是:短视频创作者自动生成背景音乐。同类可对比的替代方案包括 Mubert、AIVA、Magenta Studio。

上一篇:Los-Angeles-Music-Composer

下一篇:MuseMorphose

同类项目推荐

tango 开源

输入一句话,自动生成匹配的音频内容

A family of diffusion models for text-to-audio generation.

★ 1239 2026-08-09
AuK 开源

一个模型搞定语音生成、编辑与分离

AuK: An Open-Source Foundational Model for Speech Generation and Editing

★ 1236 2026-09-13
swift-tts 开源

Swift 项目三行代码接入系统 TTS,兼容 TCA 和 Combine

A straightforward package containing version for Swift modern concurrency, Point-Fre···

★ 52 2026-08-09
ai-dj 开源

现场演出中实时用 AI 生成音乐,保持人类掌控

AI music generation for live performance - Standalone (Ableton Link) + VST3/AU. 8 tr···

★ 245 2026-08-09