DemoFusion

用低显存生成高分辨率图像,细节更丰富

DemoFusion是一个旨在普及高分辨率图像生成的开源项目,由CVPR 2024收录。它解决了在有限GPU资源下生成高分辨率图像时常见的显存溢出和细节丢失问题。核心能力是采用渐进式放大和细节注入技术,让用户能够基于Stable Diffusion等基础模型,生成高达4K甚至更高分辨率的图像,同时保持图像的全局一致性和局部细节丰富度。项目提供了完整的Jupyter Notebook教程,便于研究者复现和二次开发。

开源 free 图像生成
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 2038
维护状态 低维护
是否开源 是
定价模式 free

项目数据

分类图像生成
开发团队PRIS-CV
所属国家
定价模式free
价格说明开源项目,提供在线演示页面,可免费体验,无付费版本。
访问状态
是否开源是
开源协议MIT
主要语言Jupyter Notebook
技术栈/模型aigc,genai,high-resolution,low-resource,stable-diffusion
GitHub 星标★ 2038
30天Star增速
HF 下载量
上线时间2023-10-29 00:00:00
最近更新2026-09-20 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数4

使用教程

难度:进阶 约 30 分钟 部署方式:本地安装 6 步

⚠ 该项目 README 未提供完整安装说明,以下步骤为通用流程,请以官方文档为准。

环境要求

  • Python 环境与 Jupyter Notebook(项目主体为 .ipynb 教程)
  • 可运行潜在扩散模型(LDM)的 GPU 环境(README 未给出具体显存要求)
  • 已安装 git,用于克隆仓库
  • 首次运行需下载开源扩散模型权重,需预留磁盘空间与网络

安装与启动步骤

  1. 1克隆仓库

    把 DemoFusion 代码仓库下载到本地。README 节选中未给出安装命令,此步使用项目信息中的仓库地址。

    git clone https://github.com/PRIS-CV/DemoFusion.git
  2. 2进入项目目录

    切换到克隆下来的目录,后续的 Notebook 与流水线文件都在这里。

    cd DemoFusion
  3. 3查看 Usage 说明

    README 的 Usage 章节是官方使用入口,节选中未展开内容,请以仓库内实际文本与 Notebook 内单元格说明为准安装依赖。

  4. 4启动 Jupyter

    在项目目录下启动 Jupyter,打开仓库提供的 Notebook 教程按顺序运行。未安装 Jupyter 时先自行安装。

    jupyter notebook
  5. 5接入 ComfyUI(可选)

    README 新闻区提到第三方 ComfyUI 自定义节点,想在 ComfyUI 中使用可克隆该节点仓库后按其说明安装。

    git clone https://github.com/deroberon/demofusion-comfyui.git
  6. 6试用 ControlNet

    README 提到 DemoFusion with ControlNet 已可用,对应流水线为 pipeline_demofusion_sdxl_controlnet,并附带本地 Gradio Demo。

如何确认成功

Jupyter 能打开仓库中的 .ipynb 教程并顺利运行首个代码单元,无依赖缺失或模型加载报错。

常见问题

Q:显存有限还能生成高分辨率图吗?

A:可以。DemoFusion 采用渐进式放大、Skip Residual 与 Dilated Sampling,在有限资源下逐步提升分辨率,中间结果还能当预览用于快速调整提示词。

Q:需要自己训练模型吗?

A:不需要。该框架是在已有开源潜在扩散模型基础上扩展的,属于免训练的推理方案,直接加载现成模型即可。

Q:有 ComfyUI 支持吗?

A:有。README 新闻区给出第三方 ComfyUI 自定义节点 demofusion-comfyui,由 Andre 实现,可按该节点仓库的说明接入使用。

Q:支持 ControlNet 吗?

A:支持。README 提到 DemoFusion with ControlNet 已可用,对应流水线为 pipeline_demofusion_sdxl_controlnet,并提供本地 Gradio Demo。

注意事项

  • README 节选中未包含完整安装步骤与依赖清单,动手前请以仓库最新 README 和 Notebook 内说明为准。
  • 渐进式放大需要多次采样迭代,生成单张高分辨率图耗时明显长于常规出图。
  • 建议在支持 CUDA 的 GPU 上运行,资源紧张时可先降低目标分辨率测试流程。

核心亮点

  • 渐进式放大策略,有效降低显存占用,支持低资源设备生成高分辨率图像
  • 细节注入机制,在放大过程中保持并增强图像细节,避免模糊
  • 基于Stable Diffusion,易于集成到现有工作流,且提供Notebook教程

不足之处

  • 生成速度可能较慢,因为需要多次迭代放大
  • 文档/社区待观察

适用场景

  • 在消费级GPU上生成高分辨率艺术插画或海报
  • 为游戏或影视制作提供高分辨率概念图
  • 作为研究工具,探索扩散模型在超分辨率领域的应用

替代项目

Stable Diffusion Upscaler、ControlNet Tile、Ultimate SD Upscale

项目介绍

DemoFusion 是图像领域的开源项目,由 PRIS-CV 开发,2023 年首次发布。

在全站 13,090 个收录项目中,它的 GitHub 星标数(2,038)位列前 30%,在图像分类的 839 个项目里位列前 9%。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-20。提供在线演示页面,可免费体验,无付费版本。从国内网络环境看,可直接访问。

它主要面向的使用场景是:在消费级GPU上生成高分辨率艺术插画或海报。同类可对比的替代方案包括 Stable Diffusion Upscaler、ControlNet Tile、Ultimate SD Upscale。

同类项目推荐

satori 开源

网页代码一键变高清图,放大不糊,不用截图

Enlightened library to convert HTML and CSS to SVG

★ 13967 2026-08-09
C2GAN 开源

用关键点精准控制图像生成,让AI画出你想要的结构

[ACM MM 2019 Oral] Cycle In Cycle Generative Adversarial Networks for Keypoint-Guide···

★ 70 2026-08-09
imagen-pytorch 开源

说句话生成高清图,放大也不糊

Implementation of Imagen, Google's Text-to-Image Neural Network, in Pytorch

★ 8427 2026-08-09