OpenDWM

用生成式世界模型补齐自动驾驶长尾场景,训练评估一条龙。

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 视频生成 🍴 复刻 50 🐛 待处理 39 👀 关注 13
GitHub ↗
GitHub 星标 ★ 426
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

OpenDWM 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队SenseTime-FVG
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型autonomous-driving,diffusion-models,video-generation,world-models
GitHub 星标★ 426
上线时间2025-01-15 00:00:00
代码更新2025-06-19
仓库体积352 KB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数6

项目介绍

OpenDWM 是一个专注于自动驾驶场景的开源世界模型代码库,提供从训练、推理到评估的完整工具链,并附带预训练权重。它基于扩散模型和视频生成技术,旨在解决自动驾驶中罕见场景数据稀缺和长尾问题,通过生成逼真的驾驶视频来增强模型训练和测试。核心能力包括:支持多种世界模型架构、提供标准化的评估指标、以及开箱即用的预训练模型,方便研究者快速复现和对比。项目处于早期阶段,但代码结构清晰,文档齐全,适合自动驾驶和视频生成领域的研究者入门和二次开发。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 426

使用教程

ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。

难度:高级 约 60 分钟 部署方式:本地GPU 5 步

环境要求

  • NVIDIA GPU(显存 24GB 起)
  • CUDA

安装与启动步骤

  1. 1装匹配版本的 torch

    官方指定 torch 版本,其它版本会有算子不兼容。

    python -m pip install torch==2.5.1 torchvision==0.20.1
  2. 2装其余依赖

    按 requirements 装。

    python -m pip install -r requirements.txt
  3. 3下权重

    生成模型与场景编码器分开下,缺一个跑不了。

  4. 4跑一个多视角生成示例

    仓库给了示例配置,先照抄跑通。

    PYTHONPATH=src python examples/ctsd_generation_example.py
  5. 5换自己的场景参数

    相机内外参与轨迹是可控性的关键。

如何确认成功

生成的多视角视频里,同一物体在不同视角下的位置与朝向保持一致,而不是每个视角各画一遍

注意事项

  • 它做的是自动驾驶场景的视频生成,可控性来自相机参数与轨迹输入。
  • 多视角一致性是这类模型的核心指标,看单视角画面容易被骗。
  • 显存随视角数与分辨率上升,先单视角验证链路。
  • 生成内容不构成真实路测数据,不能替代实车验证。
  • 论文代码,脚本里的路径与示例配置要按本机改。

核心亮点

  • 提供预训练权重,开箱即用,省去从头训练的时间成本
  • 集成训练、推理、评估完整流程,降低研究复现门槛
  • 基于扩散模型,生成视频质量高,贴近真实驾驶场景

不足之处

  • 项目早期,社区贡献和生态尚不成熟
  • 文档/社区待观察

适用场景

  • 自动驾驶感知模型的仿真数据增强
  • 罕见驾驶场景的视频生成与测试
  • 世界模型架构的学术研究与对比

替代项目

GAIA-1、DriveDreamer、WoVoGen

上一篇:Vista

下一篇:shortdrama-pipeline

同类项目推荐

php-bilibili-danmu 开源

B站直播弹幕机器人,自动互动+积分商城,提升直播间活跃度

一个用于 B站直播间的机器人与积分系统。 支持监听指定直播间的弹幕、礼物、进入、关注、分···

★ 159 2026-08-09
GoldenDict-OCR 开源

让 GoldenDict 更快更聪明,OCR 取词+全文搜索一步到位

GoldenDict++: Optimizations for faster dictionary loading and searching, even with l···

★ 239 2026-08-09
aurora 开源

用AI预测地球天气,秒级出结果,替代传统数值预报

Implementation of the Aurora model for Earth system forecasting

★ 1043 2026-08-09
growth-lab 开源

让 AI 自动跑通增长全流程,从读懂产品到优化下一轮。

An end-to-end growth tool that understands the product, fetch the data it needs, res···

★ 1972 2026-08-09
oracle3 开源

用 Wang Transform 定价,自动在多个预测市场套利交易。

Oracle3: open-source trading engine and MCP server for prediction markets. Finds fee···

★ 567 2026-08-09
geo-aeo-tracker 开源

一键追踪品牌在6大AI模型中的曝光表现

Open-source AI visibility tracker. Track how ChatGPT, Perplexity, Gemini, Copilot an···

★ 323 2026-08-09
rssh 开源

让 AI 帮你管服务器,SSH 运维更省心

An SSH tool dedicated to addressing all pain points · (macOS/Windows/Linux/Android/···

★ 511 2026-08-09
Media-Hoarder 开源

把散落各处的电影和剧集,整理成一个漂亮又顺手的私人影院。

Media Hoarder - THE media frontend for data hoarders and movie lovers

★ 301 2026-08-09
HealthChain 开源

用 Python 快速构建合规的医疗 AI 智能体,直连 EHR 数据。

Python SDK for healthcare AI — typed, validated FHIR tools for agents, real-time EH···

★ 231 2026-08-09