项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 291
技术标签
核心亮点
- 基于人类偏好数据训练奖励模型,直接优化审美指标,而非仅依赖技术指标。
- 提供完整的训练代码和配置,易于复现论文结果。
- 与 Stable Diffusion 深度集成,可无缝替换基础模型进行微调。
不足之处
- 训练资源消耗大,需要多卡 GPU 和大量偏好数据。
- 文档/社区待观察,项目维护活跃度一般。
适用场景
- 研究者复现偏好对齐算法,用于学术实验。
- 开发者对 Stable Diffusion 进行个性化微调,提升生成图质量。
- 产品团队用于构建更符合用户审美的图像生成服务。
替代项目
Diffusion-DPO、Stable-Diffusion-2-1、Pick-a-Pic
同类项目推荐
FATE-LLM
开源
数据不出域,多方联合微调大模型
Federated Learning for LLMs.
gflownet
开源
按奖励比例采样多样化候选解的生成模型框架
Generative Flow Networks - GFlowNet
maestro
开源
一行命令微调多模态模型,快速搞定视觉语言任务
streamline the fine-tuning process for multimodal models: PaliGemma 2, Florence-2, a···
KnowledgeCircuits
开源
拆解大模型内部知识电路,精准定位事实存储与推理路径
[NeurIPS 2024] Knowledge Circuits in Pretrained Transformers
Kardia-R1
开源
让AI学会共情,用强化学习提升情感支持回复质量
[WWW] Kardia-R1: Unleashing LLMs to Reason toward Understanding and Empathy for Emot···
diffusers-torchao
开源
一键优化扩散模型,推理提速3倍,显存减半
End-to-end recipes for optimizing diffusion models with torchao and diffusers (infer···
VeriThinker
开源
让模型学会自我验证,推理更快更准
[NeurIPS 2025] VeriThinker: Learning to Verify Makes Reasoning Model Efficient
opacus
开源
几行代码给 PyTorch 训练加差分隐私,防数据泄露
Training PyTorch models with differential privacy
katib
开源
在K8s上自动调参,让模型优化省心省力
WARNING: Katib project is DEPRECATED, users should migrate to OptimizationJob and Ku···
