VideoTetris

把复杂文字提示拆解组合,生成多对象连贯视频

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 6 🐛 待处理 6 👀 关注 19
GitHub ↗
GitHub 星标 ★ 238
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,可免费使用和部署。

项目预览

VideoTetris 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队YangLing0818
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,可免费使用和部署。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型diffusion-models,large-language-models,text-to-video-generation
GitHub 星标★ 238
上线时间2024-06-06 00:00:00
代码更新2024-11-04
仓库体积28.7 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数8

项目介绍

VideoTetris 是 NeurIPS 2024 收录的组合式文生视频框架,解决现有模型难以生成包含多个对象、动作和场景的复杂视频问题。它通过将视频生成分解为空间、时间和时空三个维度的组合单元,并利用大语言模型进行指令分解和排序,实现复杂文本提示的精准视频合成。核心能力包括:基于扩散模型的组合式生成、多对象时空一致性控制、以及可插拔的模块化设计,能无缝集成到现有文生视频模型(如 VideoCrafter)中。项目提供完整训练和推理代码,支持自定义组合逻辑,为视频生成研究提供新范式。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 238

核心亮点

  • 提出三维组合生成框架,解决多对象/动作场景的生成难题
  • 基于大模型指令分解,提升复杂提示的语义跟随精度
  • 模块化设计,可轻松接入现有扩散模型,扩展性强

不足之处

  • 项目处于早期,文档和社区支持待观察
  • 训练和推理资源需求较高,普通硬件难以复现

适用场景

  • 影视预演:快速生成多角色互动分镜
  • 广告创意:按脚本生成多场景组合视频素材
  • 研究实验:作为组合式视频生成的基线框架

替代项目

VideoCrafter、ModelScope Text-to-Video、CogVideo

上一篇:openscenesense-ollama

下一篇:ai-video-summarizer

同类项目推荐

VideoGrain 开源

用文本精细控制视频编辑,从风格到细节随心调

[ICLR 2025] VideoGrain: This repo is the official implementation of "VideoGrain: Mod···

★ 159 2026-08-09
qiaomu-cut-skill 开源

让 AI 自动当导演,素材到成片一键可复现

乔木智能视频导演 Skill:素材治理、双语字幕、品牌包装与可复现渲染 | Agent-native vide···

★ 379 2026-08-09
Awesome-Video-Diffusion 开源

想找视频生成模型?这份清单带你一站直达最新论文和代码。

A curated list of recent diffusion models for video generation, editing, and various···

★ 5833 2026-08-09
YouDub-webui 开源

一键下载翻译配音,视频自动变中文版

Open-source AI video localization and dubbing for YouTube/Bilibili: speech recogniti···

★ 5822 2026-08-09
Olaf-World 开源

让视频生成听你指挥,构建可交互的世界模拟器

[ICML 2026] Orienting Latent Actions for Video World Modeling

★ 129 2026-08-09
vox-director 开源

输入主题,自动产出 Vox 风格拼贴解说视频

Turn one topic into a finished Vox-style paper-collage explainer/ad video — automat···

★ 2730 2026-08-09
OpenChatCut 开源

跟 AI 聊天就能剪视频,本地运行更安心

Open-source, local-first conversational AI video editor with a professional multi-tr···

★ 3017 2026-08-09
awesome-seedance 开源

套用现成提示词,快速生成电影感 Seedance 视频

The ultimate collection of high-fidelity Seedance 2.0 prompts and Seedance AI resour···

★ 2833 2026-09-29