DemoFusion

用低显存生成高分辨率图像,细节更丰富

开源 🏷️完全免费 ✅ 目前可打开 图像生成 🍴 复刻 215 🐛 待处理 23 👀 关注 29
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 2034
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,提供在线演示页面,可免费体验,无付费版本。

项目预览

DemoFusion 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类图像生成
开发团队PRIS-CV
定价模式🏷️完全免费
价格说明开源项目,提供在线演示页面,可免费体验,无付费版本。
访问状态✅ 目前可打开
是否开源是
开源协议MIT
主要语言Jupyter Notebook
技术栈/模型aigc,genai,high-resolution,low-resource,stable-diffusion
GitHub 星标★ 2034
上线时间2023-10-29 00:00:00
代码更新2025-10-10
仓库体积59.7 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数5

项目介绍

DemoFusion是一个旨在普及高分辨率图像生成的开源项目,由CVPR 2024收录。它解决了在有限GPU资源下生成高分辨率图像时常见的显存溢出和细节丢失问题。核心能力是采用渐进式放大和细节注入技术,让用户能够基于Stable Diffusion等基础模型,生成高达4K甚至更高分辨率的图像,同时保持图像的全局一致性和局部细节丰富度。项目提供了完整的Jupyter Notebook教程,便于研究者复现和二次开发。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 2034

技术标签

使用教程

⚠ 本教程由 AI 依据该项目 README 整理;原始文档不完整,部分步骤为通用流程推断,实际安装请以项目官方文档为准。

难度:进阶 约 30 分钟 部署方式:本地安装 6 步

⚠ 该项目 README 未提供完整安装说明,以下步骤为通用流程,请以官方文档为准。

环境要求

  • Python 环境与 Jupyter Notebook(项目主体为 .ipynb 教程)
  • 可运行潜在扩散模型(LDM)的 GPU 环境(README 未给出具体显存要求)
  • 已安装 git,用于克隆仓库
  • 首次运行需下载开源扩散模型权重,需预留磁盘空间与网络

安装与启动步骤

  1. 1克隆仓库

    把 DemoFusion 代码仓库下载到本地。README 节选中未给出安装命令,此步使用项目信息中的仓库地址。

    git clone https://github.com/PRIS-CV/DemoFusion.git
  2. 2进入项目目录

    切换到克隆下来的目录,后续的 Notebook 与流水线文件都在这里。

    cd DemoFusion
  3. 3查看 Usage 说明

    README 的 Usage 章节是官方使用入口,节选中未展开内容,请以仓库内实际文本与 Notebook 内单元格说明为准安装依赖。

  4. 4启动 Jupyter

    在项目目录下启动 Jupyter,打开仓库提供的 Notebook 教程按顺序运行。未安装 Jupyter 时先自行安装。

    jupyter notebook
  5. 5接入 ComfyUI(可选)

    README 新闻区提到第三方 ComfyUI 自定义节点,想在 ComfyUI 中使用可克隆该节点仓库后按其说明安装。

    git clone https://github.com/deroberon/demofusion-comfyui.git
  6. 6试用 ControlNet

    README 提到 DemoFusion with ControlNet 已可用,对应流水线为 pipeline_demofusion_sdxl_controlnet,并附带本地 Gradio Demo。

如何确认成功

Jupyter 能打开仓库中的 .ipynb 教程并顺利运行首个代码单元,无依赖缺失或模型加载报错。

常见问题

Q:显存有限还能生成高分辨率图吗?

A:可以。DemoFusion 采用渐进式放大、Skip Residual 与 Dilated Sampling,在有限资源下逐步提升分辨率,中间结果还能当预览用于快速调整提示词。

Q:需要自己训练模型吗?

A:不需要。该框架是在已有开源潜在扩散模型基础上扩展的,属于免训练的推理方案,直接加载现成模型即可。

Q:有 ComfyUI 支持吗?

A:有。README 新闻区给出第三方 ComfyUI 自定义节点 demofusion-comfyui,由 Andre 实现,可按该节点仓库的说明接入使用。

Q:支持 ControlNet 吗?

A:支持。README 提到 DemoFusion with ControlNet 已可用,对应流水线为 pipeline_demofusion_sdxl_controlnet,并提供本地 Gradio Demo。

注意事项

  • README 节选中未包含完整安装步骤与依赖清单,动手前请以仓库最新 README 和 Notebook 内说明为准。
  • 渐进式放大需要多次采样迭代,生成单张高分辨率图耗时明显长于常规出图。
  • 建议在支持 CUDA 的 GPU 上运行,资源紧张时可先降低目标分辨率测试流程。

核心亮点

  • 渐进式放大策略,有效降低显存占用,支持低资源设备生成高分辨率图像
  • 细节注入机制,在放大过程中保持并增强图像细节,避免模糊
  • 基于Stable Diffusion,易于集成到现有工作流,且提供Notebook教程

不足之处

  • 生成速度可能较慢,因为需要多次迭代放大
  • 文档/社区待观察

适用场景

  • 在消费级GPU上生成高分辨率艺术插画或海报
  • 为游戏或影视制作提供高分辨率概念图
  • 作为研究工具,探索扩散模型在超分辨率领域的应用

替代项目

Stable Diffusion Upscaler、ControlNet Tile、Ultimate SD Upscale

同类项目推荐

PIDM 开源

用扩散模型按姿态生成逼真人物图,细节不糊

Person Image Synthesis via Denoising Diffusion Model (CVPR 2023)

★ 501 2026-08-09
SEAN 开源

拖拽语义图,逐区域控制生成图像的风格与内容

SEAN: Image Synthesis with Semantic Region-Adaptive Normalization (CVPR 2020, Oral)

★ 657 2026-08-09
photo-revival 开源

把日常照片一键变成诗意手绘插图,文艺感拉满

Codex skill for turning everyday photos into poetic white-paper hand-drawn illustrat···

★ 607 2026-08-09
Compositional_Neural_Painter 开源

让AI像画家一样动态规划区域,逐笔画出图像

[MM 2023] Stroke-based Neural Painting and Stylization with Dynamically Predicted Pa···

★ 55 2026-08-09
PhotoPoster 开源

上传姿态,生成逼真人物图像,助力舞蹈动画研究。

To support and further the research in the field of portrait animation , we are exci···

★ 205 2026-08-09
Imaginer 开源

在桌面上用几句话生成图像,无需代码。

Imagine with AI

★ 109 2026-08-09
cyclegan-qp 开源

用二次势能约束,让艺术风格迁移更保真

Official PyTorch implementation of "Artist Style Transfer Via Quadratic Potential"

★ 68 2026-08-09
comfyui-colab 开源

在浏览器里免费跑 ComfyUI,快速出图不折腾显卡

comfyui colabs templates new nodes

★ 550 2026-08-09