MagicBrush

手工标注的指令图像编辑数据集,让模型更懂你的修改指令。

开源 🏷️完全免费 ✅ 目前可打开 图像生成 🍴 复刻 16 👀 关注 6
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 412
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源数据集,提供在线演示页面,完全免费使用。

项目预览

MagicBrush 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类图像生成
开发团队OSU-NLP-Group
定价模式🏷️完全免费
价格说明开源数据集,提供在线演示页面,完全免费使用。
访问状态✅ 目前可打开
是否开源是
开源协议NOASSERTION
主要语言Python
技术栈/模型diffusion-models,image-editing,image-generation,image-synthesis,instruction-following,text-to-image,text-to-image-generation,text-to-image-synthesis
GitHub 星标★ 412
上线时间2023-06-06 00:00:00
代码更新2026-10-17
仓库体积114.2 MB
本站数据更新2026-11-09
维护状态较活跃
收录时间2026-08-09
浏览次数5

项目介绍

MagicBrush 是 NeurIPS 2023 收录的一个用于指令引导图像编辑的手工标注数据集。它解决了现有图像编辑数据集依赖自动生成、指令与编辑结果不匹配的问题,提供了约 10 万张真实场景图片,每张图片配有自然语言编辑指令和对应的目标编辑结果。该数据集覆盖多种编辑类型(如替换、添加、删除、颜色/纹理修改等),支持训练和评估基于扩散模型的指令编辑系统。核心能力包括:提供高质量人工标注数据、支持多轮编辑场景、提供标准评估协议。项目附带代码和基线模型,便于研究者复现和对比,推动文本到图像编辑领域的发展。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 412

使用教程

ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。

难度:高级 约 55 分钟 部署方式:本地GPU 5 步

环境要求

  • NVIDIA GPU(显存 16GB 起)
  • CUDA

安装与启动步骤

  1. 1拉依赖仓库

    它的基线实现来自另一个仓库,两个都要。

    git clone https://github.com/timothybrooks/instruct-pix2pix.git
  2. 2拉本仓库取数据与模型

    数据集与权重单独分发。

  3. 3装环境

    按说明装,注意扩散框架版本。

  4. 4跑一次指令编辑

    给图与一句指令,看改动是否只作用于语义相关区域。

  5. 5用评测集算指标

    它有配套评测,别只看单张效果。

如何确认成功

指令要求「把天空换成晚霞」时,只有天空区域变化,建筑与人物保持原样

注意事项

  • 它是指令式图像编辑的数据集与模型,重点是数据质量与评测。
  • 数据集标注是多人协作产出,指令表述差异大。
  • 基线代码在另一个仓库,版本要对齐。
  • 编辑真实照片涉及肖像与版权。
  • 评测指标与主观感受常有差距。

核心亮点

  • 人工标注保证数据质量,指令与编辑结果高度对齐
  • 覆盖多类型编辑操作,支持多轮对话式编辑场景
  • 提供评估协议和基线,便于公平对比研究

不足之处

  • 数据集规模相对较小,可能限制大规模训练
  • 文档和社区支持待观察

适用场景

  • 训练指令引导的图像编辑模型
  • 评估文本到图像编辑算法性能
  • 研究多轮交互式图像编辑

替代项目

InstructPix2Pix、EditBench、TEdBench

同类项目推荐

freshqa 开源

测测你的AI模型,能否答对最新鲜的问题

Data and code for FreshLLMs (https://arxiv.org/abs/2310.03214)

★ 404 2026-08-09
PolData 开源

政治学数据一站查,省去到处找数据

A dataset with political datasets

★ 768 2026-11-02
DailyTalk 开源

让 TTS 学会对话,生成自然多轮语音

Official repository of DailyTalk: Spoken Dialogue Dataset for Conversational Text-to···

★ 262 2026-08-09
flickr_scraper 开源

按关键词批量抓 Flickr 图片,快速攒出 CV 训练集

Python Flickr image scraper for building keyword-based computer vision datasets with···

★ 302 2026-09-18
deepfabric 开源

一条流水线搞定合成数据生成、训练与评估

Generate High-Quality Synthetics, Train, Measure, and Evaluate in a Single Pipeline

★ 895 2026-08-10
Shot2Story 开源

多镜头视频理解基准,让AI看懂镜头叙事

A new multi-shot video understanding benchmark Shot2Story with comprehensive video s···

★ 181 2026-08-09
Bastet 开源

用 AI 数据集和自动化流程,精准揪出 DeFi 合约漏洞

Bastet is a comprehensive dataset of common smart contract vulnerabilities in DeFi a···

★ 124 2026-08-19
KG-MM-Survey 开源

一张清单看懂知识图谱+多模态,快速入门不迷路

Knowledge Graphs Meet Multi-Modal Learning: A Comprehensive Survey

★ 508 2026-08-09
synthetic-data-generator 开源

一键生成高仿真表格数据,解决隐私与数据稀缺难题

SDG is a specialized framework designed to generate high-quality structured tabular ···

★ 2442 2026-08-09