MMVID

输入文字和图片,自动生成匹配的动态视频

开源 🏷️完全免费 ✅ 目前可打开 视频生成 🍴 复刻 22 🐛 待处理 5 👀 关注 16
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 191
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,提供在线演示页面,可免费体验,无付费版本。

项目预览

MMVID 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队snap-research
定价模式🏷️完全免费
价格说明开源项目,提供在线演示页面,可免费体验,无付费版本。
访问状态✅ 目前可打开
是否开源是
开源协议NOASSERTION
主要语言Python
技术栈/模型bert,deep-learning,multimodal-learning,multimodal-video-generation,text-to-video,transformer,video-generation
GitHub 星标★ 191
上线时间2022-03-04 00:00:00
代码更新2022-06-16
仓库体积79.4 MB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数5

项目介绍

MMVID是一个基于多模态条件约束的视频生成开源项目,来自CVPR 2022论文。它解决的核心问题是:如何根据文本描述和参考图像,生成与内容语义一致、且具有合理时序动态的视频。项目融合了BERT文本编码器、Transformer架构和深度多模态学习技术,能够同时理解文本中的动作语义(“Tell Me How”)和图像中的外观内容(“Show Me What”),并据此合成连贯的视频帧序列。其核心能力包括:文本到视频的生成、图像与文本联合条件生成、以及基于Transformer的时序建模。该实现提供了完整的训练和推理代码,支持自定义数据集,适合研究人员和开发者用于多模态内容生成、视频合成等方向的实验与应用。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 191

核心亮点

  • CVPR 2022顶会论文官方实现,算法有学术背书
  • 支持文本+图像多模态条件,生成视频内容更可控
  • 代码结构清晰,基于PyTorch,易于二次开发

不足之处

  • 项目星标数较少,社区活跃度和维护力度待观察
  • 生成视频的分辨率和时长可能有限,需自行验证

适用场景

  • 学术研究:多模态视频生成算法的复现与改进
  • 创意内容生成:根据故事脚本和角色图自动生成动画片段
  • 数据增强:为视频理解模型合成训练样本

替代项目

VideoGPT、TATS (Temporal Autoregressive Transformer)、NUWA

上一篇:Video-Motion-Customization

下一篇:KandinskyVideo

同类项目推荐

clipforge 开源

上传商品图,一键生成带货短视频,多平台可用

ClipForge(原『带货剪手』/ daihuo-jianshou):开源 AI 带货短视频神器——上传一张商品···

★ 1214 2026-08-09
Kiwi-Edit 开源

用一句话或一张图,精准编辑视频内容

A unified and fully open-source framework for instruction-guided and reference-guide···

★ 331 2026-08-09
UniAnimate-DiT 开源

上传一张图,让照片里的人物动起来,生成自然流畅的动画视频。

UniAnimate-DiT: Human Image Animation with Large-Scale Video Diffusion Transformer

★ 856 2026-08-09
Stable-Video-Infinity 开源

让视频扩散模型无限延长也不崩坏

[ICLR 26 Oral] Stable Video Infinity: Infinite-Length Video Generation with Error Re···

★ 2620 2026-09-29
Seedance-2-API 开源

一行代码调用字节 Seedance,快速生成高清视频

Python wrapper for ByteDance's Seedance 2.0 , Seedance 2.5 and Seedance 2 Mini API —···

★ 362 2026-08-09
claude-animated-shorts 开源

一句话让 Claude 生成 2D 角色 3D 场景动画短片

Free Claude skill: viral animated story shorts (2D characters in a 3D world) with th···

★ 2330 2026-11-06
text2youtube 开源

输入文字,秒出 YouTube 视频,自动配音加字幕

Create youtube videos from a text prompt in seconds

★ 312 2026-08-09
hotclip 开源

长视频直播一键切竖屏爆款,本地免费无水印

免费开源的 AI 剪辑 / 直播切片工具:长视频、直播回放、播客一键切成爆款竖屏短视频,直发抖···

★ 436 2026-09-15