open-genie

复现交互式世界模型，让 AI 生成可玩的视频环境

开源 🏷️完全免费 🔧 仅开源项目，无在线服务，需自行部署 视频生成 🍴 复刻 38 🐛 待处理 6 👀 关注 7
GitHub ↗
GitHub 星标 ★ 296
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目，MIT许可证，完全免费，可自行部署使用。

项目预览

open-genie 项目界面预览图
图片来源：GitHub 官方仓库名片

项目数据

分类视频生成
开发团队myscience
GitHubhttps://github.com/myscience/open-genie
定价模式🏷️完全免费
价格说明开源项目，MIT许可证，完全免费，可自行部署使用。
访问状态🔧 仅开源项目，无在线服务，需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型artificial-intelligence,deep-learning,generative-ai,genie,lightning,pytorch-implementation,pytorch-lightning,torch,transformer,video-generation
GitHub 星标★ 296
上线时间2024-05-21 00:00:00
代码更新2024-08-21
仓库体积844 KB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

open-genie 是 DeepMind 论文《Genie: Generative Interactive Environments》的非官方 PyTorch 实现，旨在复现一个能根据文本或图像提示生成可交互视频环境的生成式基础模型。该项目解决的核心问题是：如何让 AI 不仅生成静态或动态视频，还能生成用户可实时控制的交互式世界。其核心能力包括：基于视频 tokenizer 将视频帧离散化为 token，通过自回归 transformer 学习世界模型，并支持用户动作控制环境演化。项目基于 PyTorch Lightning 构建，代码结构清晰，便于研究者理解 Genie 的架构细节并在此基础上进行二次开发。目前项目处于早期阶段，提供了基础训练和推理流程，但尚未发布预训练权重，主要面向对交互式世界模型感兴趣的研究者和开发者，用于学术研究和实验验证。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 296

核心亮点

  • 完整复现 Genie 架构，涵盖视频 tokenizer、自回归世界模型和动作控制模块
  • 基于 PyTorch Lightning 实现，代码模块化清晰，易于扩展和调试
  • 提供训练和推理脚本，方便研究者快速上手实验

不足之处

  • 未提供预训练权重，需要自行训练，成本较高
  • 文档和示例较少，社区支持待观察

适用场景

  • 学术研究：复现和验证 Genie 模型在交互式环境生成上的效果
  • 游戏开发：探索 AI 自动生成可交互游戏关卡或场景
  • 机器人仿真：生成可交互的虚拟环境用于强化学习训练

替代项目

VideoPoet、GameNGen、UniSim

上一篇：ai-mv-generator

下一篇：champ

同类项目推荐

HyDRA 开源

让视频模型记住过去，生成更连贯的未来

Out of Sight but Not Out of Mind: Hybrid Memory for Dynamic Video World Models

★ 287 2026-08-09
Promptus 开源

用提示词流替代视频流，极低带宽下传输视频

Official impl. of AAAI Oral Paper "Promptus: Can Prompts Streaming Replace Video Str···

★ 100 2026-08-09
dsh-video-storyboard 开源

长视频压成一张分镜图，AI 一眼看懂

Scene-aware storyboard for DeepSeek Harness: 9-16 numbered cells with timestamps + t···

★ 470 2026-11-06
Cassette 开源

输入文字，自动生成30秒竖屏解说短视频

Cassette is designed to create 30-second explanatory videos suitable for Instagram R···

★ 71 2026-08-09
TATS 开源

用文本或音频生成分钟级连贯长视频，突破短视频限制。

Official PyTorch implementation of TATS: A Long Video Generation Framework with Time···

★ 290 2026-08-09
Toonflow-app 开源

一本小说几分钟变动画短剧，省掉编剧分镜的苦力活。

短剧、漫剧制作工具 Toonflow：开源 AI 视频创作平台，集成剧本创作、智能分镜、角色与场景···

★ 21046 2026-08-09
UniAnimate 开源

一张图+动作序列，生成连贯人物动画视频

Code for SCIS-2025 Paper "UniAnimate: Taming Unified Video Diffusion Models for Cons···

★ 1191 2026-08-09
heygen-cli 开源

在终端敲命令，自动生成 AI 数字人视频

Create AI videos from the terminal. Official CLI for the HeyGen video generation API···

★ 171 2026-08-09
OmniWeaving 开源

自由组合条件，让视频生成按你的意图推理出片

Official Implementation of OmniWeaving: Towards Unified Video Generation with Free-f···

★ 807 2026-11-09