MagicDrive-V2

用文本和轨迹,一键生成高分辨率多视角驾驶长视频

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 视频生成 🍴 复刻 28 🐛 待处理 22 👀 关注 12
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 723
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,AGPL-3.0许可,可自行部署使用,无收费计划。

项目预览

MagicDrive-V2 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队flymin
定价模式🏷️完全免费
价格说明开源项目,AGPL-3.0许可,可自行部署使用,无收费计划。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议AGPL-3.0
主要语言Python
技术栈/模型autonomous-driving,diffusion-models,multi-view,video-generation
GitHub 星标★ 723
上线时间2024-11-21 00:00:00
代码更新2025-06-26
仓库体积419 KB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

MagicDrive-V2 是 ICCV 2025 论文的官方实现,面向自动驾驶场景的高分辨率长视频生成模型。它解决现有驾驶视频生成模型在分辨率、时长和可控性上的不足,支持多视角同步生成,并引入自适应控制机制,允许用户通过文本、布局、轨迹等条件精细控制视频内容。核心能力包括:生成高分辨率(如 1080p)的长时视频,保持多摄像头视角之间的空间一致性,并支持动态场景下的灵活编辑。该模型基于扩散模型架构,针对驾驶数据的复杂动态进行了优化,旨在为自动驾驶仿真、数据增强和模型训练提供逼真的视频数据。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 723

使用教程

⚠ 本教程由 AI 依据该项目 README 整理;原始文档不完整,部分步骤为通用流程推断,实际安装请以项目官方文档为准。

难度:高级 约 90 分钟 部署方式:集群部署 5 步

⚠ 该项目 README 未提供完整安装说明,以下步骤为通用流程,请以官方文档为准。

环境要求

  • 多卡 GPU 40G 以上
  • 自动驾驶数据集
  • Linux

安装与启动步骤

  1. 1克隆

    主仓库与依赖库都要拉。

    git clone https://github.com/flymin/MagicDrive-V2.git
  2. 2装定制训练框架

    它依赖改过的分布式训练库。

    git clone https://github.com/flymin/ColossalAI.git
  3. 3装依赖

    编译扩展再装依赖。

    BUILD_EXT=1 pip install .
  4. 4预处理好数据

    地图与轨迹要先缓存。

    python tools/prepare_data/prepare_map_aux.py +cache_gen=map_cache_gen_interp
  5. 5起训练

    单机多卡脚本直接跑。

    bash scripts/launch_1node.sh 4 ${config} --cfg-options debug=true

如何确认成功

训练能进入迭代,可视化里能看到生成的环视图像。

注意事项

  • 数据集需申请,体积很大。
  • 定制训练库必须用它给的版本。

核心亮点

  • 支持高分辨率(1080p)长视频生成,远超一般驾驶视频模型
  • 多视角同步生成,保持跨摄像头空间一致性,适合环视系统
  • 自适应控制机制,可精细调控文本、布局、轨迹等条件

不足之处

  • 文档/社区待观察
  • 训练和推理资源需求高,普通开发者难以复现

适用场景

  • 自动驾驶仿真环境构建,生成逼真的多视角驾驶视频
  • 为驾驶感知模型提供数据增强,扩充长尾场景
  • 自动驾驶系统的闭环测试与安全评估

替代项目

DriveDreamer、GenAD、Panacea

同类项目推荐

text-leech-bot 开源

把文本列表批量变成视频,自动传到 Telegram

Help to upload videos of any list in text form

★ 90 2026-08-09
HunyuanPortrait 开源

用隐式条件控制,让静态肖像秒变自然说话视频

[CVPR-2025] The code of HunyuanPortrait: Implicit Condition Control for Enhanced Por···

★ 363 2026-08-09
HunyuanVideo-1.5 开源

小模型也能出大片,画质一点不缩水

HunyuanVideo-1.5: A leading lightweight video generation model

★ 4593 2026-08-09
AI-Youtube-Shorts-Generator 开源

长视频一键变爆款竖屏短视频,免费无限制

Open-source alternative to Opus Clip, Vidyo.ai, Klap & SubMagic. Turn long-form YouT···

★ 5823 2026-08-09
diffusion-forcing-transformer 开源

用历史帧引导扩散模型,生成更连贯的视频

[ICML 2025] Official PyTorch Implementation of "History-Guided Video Diffusion"

★ 712 2026-08-09
DepthFlow 开源

一张图生成可循环的3D视差运镜视频

Images to 3D parallax videos

★ 1587 2026-09-17
TokenFlow 开源

用文本编辑视频,帧帧连贯不闪烁

Official Pytorch Implementation for "TokenFlow: Consistent Diffusion Features for Co···

★ 1708 2026-08-09
ez-text2video 开源

低配显卡也能跑文本生成视频,自定义时长和分辨率

Easily run text-to-video diffusion with customized video length, fps, and dimensions···

★ 114 2026-08-09
cli 开源

一条命令把口播毛片自动粗剪成可精修的剪辑工程

一条命令,把口播毛片变成可二次精修的剪辑工程。

★ 963 2026-10-06