
MIGC
用边界框和文字精准控制每个物体,轻松生成多实例图像。
项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 607
使用教程
环境要求
- GPU 显存 12G 以上
- Python 3.9
- 预训练权重
安装与启动步骤
-
1建环境
指定解释器版本,按仓库给的环境来。
conda create -n MIGC_diffusers python=3.9 -y -
2装依赖与本体
先装依赖清单,再装成本地可编辑模式。
pip install -r requirement.txt -
3生成单图
先用示例跑一张,确认多实例生成正常。
CUDA_VISIBLE_DEVICES=0 python inference_single_image.py -
4试增强版本
实例数量多时增强版更稳,布局更可控。
CUDA_VISIBLE_DEVICES=0 python migc_plus_inference_single_image.py -
5跑基准对照
要在自己场景用,先跑它给的基准摸底。
CUDA_VISIBLE_DEVICES=0 python inference_mig_benchmark.py
如何确认成功
给定几个实例的框与描述,生成结果中每个实例的位置与描述都对得上,且数量不缺
注意事项
- 它解的是多实例可控生成,实例越多越考验布局约束。
- 框与描述要给全,缺一项就会跑偏。
- 增强版与非增强版结果差异明显,别混着比。
- 显存随实例数与分辨率上涨很快。
核心亮点
- CVPR 2024 Highlight和TPAMI 2024双顶会论文背书,算法理论扎实
- 支持每个实例独立控制位置和属性,多对象生成精度高
- 基于Stable Diffusion,生态兼容性好,易于集成到现有流程
不足之处
- 文档/社区待观察
- 项目尚处早期,星标数不高,可能缺少成熟的使用案例
适用场景
- 复杂场景图像合成,如多人物合影、多物体布局设计
- 图像编辑,如调整单个物体位置或属性而不影响其他部分
- 创意设计辅助,快速生成多元素概念图
替代项目
ControlNet、Multi-Concept Customization、Layout-Guidance
同类项目推荐
NAI-Utility-Tool
开源
桌面端高效调用 NovelAI,生成与重绘更顺手
A frontend tool for the NovelAI API, offering a clean, high-efficiency interface alo···
ian-xiaohei-illustrations
开源
写文章缺配图?一句话生成怪诞手绘插画
中文小黑怪诞正文配图生成 Skill | 16:9 白底手绘 | 少量红橙蓝批注 | Codex Skill
CFGpp
开源
约束流形引导,让扩散模型生成更真实、不偏色
Official repository for "CFG++: manifold-constrained classifier free guidance for di···
StableSR
开源
用扩散先验把模糊老图变清晰,细节真实不糊弄
[IJCV2024] Exploiting Diffusion Prior for Real-World Image Super-Resolution
autoshade
开源
让 GPT 出调色配方,Rust 引擎稳定渲染 RAW
AI-assisted RAW photo developer: GPT vision advisor proposes an EditRecipe, a determ···
aperture
开源
一眼看透 Stable Diffusion 在关注什么,调试生成更轻松。
Visualize attention layers from Stable Diffusion
clip-guided-diffusion
开源
用一句话描述,让AI按你的文字画出想要的图
A CLI tool/python module for generating images from text using guided diffusion and ···
flux-ai-image-webui
开源
输入文字,网页上直接生成Flux AI图像
flux ai image generator web ui
oil-visual
开源
给 Codex 配上漫画墨绘画笔,让技术解释一目了然
制作统一漫画墨线风格的解释图与透明角色插图,用于概念、流程、比较和文章配图。