Video2Music

看懂视频情绪,自动生成配乐

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 26 🐛 待处理 1 👀 关注 7
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 199
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,免费使用,需自行部署。

项目预览

Video2Music 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队AMAAI-Lab
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,免费使用,需自行部署。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型affective-computing,ai,deep-learning,multimodal,music-generation
GitHub 星标★ 199
上线时间2023-10-13 00:00:00
代码更新2024-07-30
仓库体积44.1 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

Video2Music 是一个基于情感多模态 Transformer 模型的视频配乐生成工具,旨在解决视频自动生成适配音乐的问题。它通过分析视频中的视觉内容(如场景、动作、情绪)和音频线索,利用深度学习模型提取情感特征,并据此生成与视频情感基调相匹配的音乐。核心能力包括:多模态情感理解、音乐生成、以及视频-音乐对齐。项目提供了完整的训练和推理代码,支持自定义数据集,适用于影视制作、短视频创作、游戏开发等场景,可显著降低人工配乐成本。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 199

核心亮点

  • 多模态情感分析:结合视觉和音频特征,精准捕捉视频情绪
  • 基于 Transformer 的先进模型架构,生成音乐情感匹配度高
  • 提供完整训练与推理流程,支持自定义数据集扩展

不足之处

  • 项目早期,文档和社区支持待观察
  • 生成音乐质量可能受限于训练数据规模,需自行调优

适用场景

  • 短视频创作者自动生成背景音乐
  • 影视后期制作快速生成配乐草稿
  • 游戏开发中为过场动画生成情感音乐

替代项目

Mubert、AIVA、Magenta Studio

上一篇:Los-Angeles-Music-Composer

下一篇:MuseMorphose

同类项目推荐

TikTok-Voice-TTS 开源

一键调用 TikTok 语音接口,生成热门音色配音

Simple Python script to interact with the TikTok TTS Voices.

★ 96 2026-08-09
nightingale 开源

任意歌曲秒变伴奏,唱完还能给你打分

Machine learning powered Karaoke app (with scores!)

★ 1540 2026-09-17
AivisSpeech-Engine 开源

上传声音样本,即刻生成日文语音,还能模仿音色。

AivisSpeech Engine: AI Voice Imitation System - Text to Speech Engine

★ 185 2026-08-09
edge-tts-universal 开源

无需 Edge 和 API key,任意 JS 环境一键接入微软语音合成

Use Microsoft Edge's online text-to-speech service in Node.js, browsers, or any Java···

★ 81 2026-08-09
midi-emotion 开源

输入情感坐标,自动生成多乐器 MIDI 音乐

Generates multi-instrument symbolic music (MIDI), based on user-provided emotions fr···

★ 66 2026-08-09
supertonic 开源

离线秒级生成多语言语音,隐私安全不卡顿

Lightning-Fast, On-Device, Multilingual TTS — running natively via ONNX.

★ 13753 2026-09-10
awesome-music-programming 开源

一站式找齐音乐编程工具,省去全网搜索时间

A curated list of awesome music programming languages, libraries, frameworks and too···

★ 163 2026-08-09
openai-edge-tts 开源

免费替代 OpenAI TTS,一键部署,秒变语音合成 API

Free, high-quality text-to-speech API endpoint to replace OpenAI, Azure, or ElevenLa···

★ 2156 2026-08-09
rapping-neural-network 开源

用AI生成Kanye风格说唱歌词,输入开头即出完整段落

Rap song writing recurrent neural network trained on Kanye West's entire discography

★ 1067 2026-08-09