IllumiCraft

用几何+光照控制视频生成,让光影随心而动

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 视频生成 🍴 复刻 1 👀 关注 6
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 111
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,Apache-2.0许可证,代码免费,需自行部署。

项目预览

IllumiCraft 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队yuanze-lin
定价模式🏷️完全免费
价格说明开源项目,Apache-2.0许可证,代码免费,需自行部署。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型aigc,controllable-ai,controllable-generation,diffusion-models,diffusion-transformer,video-generation
GitHub 星标★ 111
上线时间2025-05-30 00:00:00
代码更新2026-07-22
仓库体积53.3 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数5

项目介绍

IllumiCraft 是一个面向可控视频生成的统一扩散模型框架,核心解决视频生成中几何结构与光照条件难以联合控制的问题。它通过将几何与光照信息融合进扩散 Transformer,支持用户对视频内容的空间布局、物体形状以及光影效果进行精细调控,从而生成更真实、更符合物理规律的动态场景。项目提供官方训练与推理代码,基于 PyTorch 实现,适合研究者和开发者用于探索可控视频生成、光照编辑等任务。其创新点在于统一了多模态条件输入,提升了生成视频的连贯性和可控性。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 111

核心亮点

  • 首个在扩散Transformer中统一几何与光照条件的视频生成框架,技术新颖
  • 支持细粒度控制物体形状和光照方向,生成结果物理一致性更强
  • 官方代码开源,基于PyTorch,便于二次开发和学术研究

不足之处

  • 项目处于早期,星标仅119,社区生态和文档尚不完善
  • 依赖高算力训练,普通开发者难以复现完整效果

适用场景

  • 影视预可视化:快速生成带光照变化的动态分镜
  • 游戏资产制作:生成可控光照的视频素材用于场景设计
  • 学术研究:探索几何与光照联合建模的扩散模型方法

替代项目

Stable Video Diffusion、AnimateDiff、ControlVideo

上一篇:studio

下一篇:HOMIE

同类项目推荐

ZJT 开源

输入创意,AI自动产出专业短剧视频

ZhiJuTong (ZJT) is an AI-powered, open-source platform specifically designed for cre···

★ 240 2026-08-09
DiffuEraser 开源

上传视频和掩码,一键移除物体,修复结果自然连贯。

DiffuEraser is a diffusion model for video inpainting, which performs great content ···

★ 705 2026-08-09
IAmDirector-Text2Video-NextJS-Cl··· 开源

输入创意,AI 自动写剧本并生成视频,人人都是导演。

本项目开源基于NextJS的前端, 希望能够提供一个用于生成式AI的文字转视频, 尤其是电影从···

★ 188 2026-08-09
VACE 开源

一个模型搞定视频生成与编辑,多条件随心控

[ICCV 2025] Official implementations for paper: VACE: All-in-One Video Creation and ···

★ 4058 2026-08-09
VideoREPA 开源

让AI生成视频更懂物理规律,提升动作和交互的真实感。

[NeurIPS 2025] VideoREPA: Learning Physics for Video Generation through Relational A···

★ 211 2026-08-09
Promptus 开源

用提示词流替代视频流,极低带宽下传输视频

Official impl. of AAAI Oral Paper "Promptus: Can Prompts Streaming Replace Video Str···

★ 101 2026-08-09
videogan 开源

用GAN生成动态场景视频,复现经典论文

Implementation of "Generating Videos with Scene Dynamics" in Tensorflow

★ 79 2026-08-09