SPO

分步优化扩散模型,让AI生图更懂审美

SPO(Step-by-step Preference Optimization)是一个CVPR 2025的扩散模型后训练方法,旨在从通用人类偏好中提升文生图模型的审美质量。它解决的是现有偏好优化方法(如DPO)在扩散模型上训练不稳定、需要昂贵的人工反馈或奖励模型的问题。SPO通过将生成过程分解为多个去噪步骤,并逐步优化每一步的偏好,从而更细粒度地对齐人类审美。其核心能力包括:无需额外奖励模型,仅使用现成的通用偏好数据集(如Pick-a-Pic)即可训练;支持SDXL等主流扩散模型;在Aesthetic、Align等基准上显著提升图像美学和提示遵循度。该方法为扩散模型的后训练提供了一种稳定、高效的偏好对齐方案,适用于图像生成模型的微调与优化。

开源 free 图像生成
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 269
维护状态 低维护
是否开源
定价模式 free

项目数据

分类图像生成
开发团队RockeyCoss
所属国家
官网地址
定价模式free
价格说明开源项目,MIT许可证,可免费使用和部署。
访问状态
是否开源
开源协议MIT
主要语言Python
技术栈/模型diffusion-models,dpo,sdxl,text-to-image,text-to-image-generation
GitHub 星标★ 269
30天Star增速
HF 下载量
上线时间2024-05-26 00:00:00
最近更新2026-09-14 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数3

使用教程

核心亮点

  • 逐步偏好优化,训练更稳定,避免DPO在扩散模型上的崩溃问题
  • 无需额外奖励模型,仅用通用偏好数据即可提升美学质量
  • 在多个基准上超越DPO等基线,显著提升图像审美和文本对齐

不足之处

  • 训练需要多步去噪计算,资源消耗相对较高
  • 文档/社区待观察

适用场景

  • 文生图模型的后训练微调,提升生成图像的美学质量
  • 在通用偏好数据集上对齐人类审美,减少人工反馈成本
  • 作为扩散模型偏好优化的研究基线

替代项目

DPO (Direct Preference Optimization)、Diffusion-DPO、SPIN-Diffusion

项目介绍

SPO 是模型训练领域的开源项目,由 RockeyCoss 开发,2024 年首次发布。

它收录于模型训练分类,该分类目前共有 518 个项目,GitHub 星标数为 269。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-14。MIT许可证,可免费使用和部署。

它主要面向的使用场景是:文生图模型的后训练微调,提升生成图像的美学质量。同类可对比的替代方案包括 DPO (Direct Preference Optimization)、Diffusion-DPO、SPIN-Diffusion。

上一篇:e4t-diffusion

下一篇:perfusion-pytorch

同类项目推荐

Long-RL 开源

让强化学习轻松驾驭超长序列,训练更稳更快

Long-RL: Scaling RL to Long Sequences (NeurIPS 2025)

★ 729 2026-08-09
TPA 开源

把注意力复杂度从平方降到线性,长序列不再卡顿

[NeurIPS 2025 Spotlight] TPA: Tensor ProducT ATTenTion Transformer (https://arxiv.or···

★ 463 2026-08-09
minimind 开源

两小时造出你的小模型,练手入门不求人

Train a 64M-parameter LLM from scratch in just 2h!

★ 62178 2026-08-09
pruna 开源

一键优化 AI 模型,推理提速又省资源。

Pruna is a model optimization framework built for developers, enabling you to delive···

★ 1286 2026-08-13