IllumiCraft

用几何+光照控制视频生成,让光影随心而动

IllumiCraft 是一个面向可控视频生成的统一扩散模型框架,核心解决视频生成中几何结构与光照条件难以联合控制的问题。它通过将几何与光照信息融合进扩散 Transformer,支持用户对视频内容的空间布局、物体形状以及光影效果进行精细调控,从而生成更真实、更符合物理规律的动态场景。项目提供官方训练与推理代码,基于 PyTorch 实现,适合研究者和开发者用于探索可控视频生成、光照编辑等任务。其创新点在于统一了多模态条件输入,提升了生成视频的连贯性和可控性。

开源 free 视频生成
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 111
维护状态 维护中
是否开源 是
定价模式 free

项目数据

分类视频生成
开发团队yuanze-lin
所属国家
定价模式free
价格说明开源项目,Apache-2.0许可证,代码免费,需自行部署。
访问状态
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型aigc,controllable-ai,controllable-generation,diffusion-models,diffusion-transformer,video-generation
GitHub 星标★ 111
30天Star增速
HF 下载量
上线时间2025-05-30 00:00:00
最近更新2026-08-24 00:00:00
维护状态维护中
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数4

使用教程

核心亮点

  • 首个在扩散Transformer中统一几何与光照条件的视频生成框架,技术新颖
  • 支持细粒度控制物体形状和光照方向,生成结果物理一致性更强
  • 官方代码开源,基于PyTorch,便于二次开发和学术研究

不足之处

  • 项目处于早期,星标仅119,社区生态和文档尚不完善
  • 依赖高算力训练,普通开发者难以复现完整效果

适用场景

  • 影视预可视化:快速生成带光照变化的动态分镜
  • 游戏资产制作:生成可控光照的视频素材用于场景设计
  • 学术研究:探索几何与光照联合建模的扩散模型方法

替代项目

Stable Video Diffusion、AnimateDiff、ControlVideo

项目介绍

IllumiCraft 是视频领域的开源项目,由 yuanze-lin 开发,2025 年首次发布。

它收录于视频分类,该分类目前共有 473 个项目,GitHub 星标数为 111。

项目仍在小幅维护中,最近一次代码更新于 2026-08-24。Apache-2.0许可证,代码免费,需自行部署。

它主要面向的使用场景是:影视预可视化:快速生成带光照变化的动态分镜。同类可对比的替代方案包括 Stable Video Diffusion、AnimateDiff、ControlVideo。

上一篇:studio

下一篇:HOMIE

同类项目推荐

MoneyPrinterTurbo 开源

输入一句话,高清短视频自动出炉,文案配音全包了

利用 AI 大模型和自动化工作流,根据主题或关键词一键生成高清短视频。Generate HD short ···

★ 125106 2026-08-09
seedance-2.0-api 开源

快速上手字节Seedance 2.0,文本/图片一键生成视频

Seedance 2.0 API — text-to-video and image-to-video examples

★ 332 2026-08-26
openscreen 开源

免费无水印录屏做演示,替代 Screen Studio

Record your screen, ship a demo. Free and open-source, GPU-accelerated, no watermark···

★ 3185 2026-08-10
MagicDance 开源

一张图+任意动作,生成身份不变的逼真人物视频

[ICML 2024] MagicPose(also known as MagicDance): Realistic Human Poses and Facial Ex···

★ 777 2026-08-09