
项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-10-07 · 当前星标 ★ 119
核心亮点
- 模块间松耦合,替换推理后端或奖励模型时改动范围小
- 支持 SFT、RLHF、DPO 等多种后训练范式,实验切换成本低
- 纯 Python 实现,便于阅读源码和二次开发
不足之处
- 项目处于早期,星标仅 119,生态和周边工具尚不完善
- 文档与社区规模待观察,遇到问题可参考的案例较少
适用场景
- 研究人员快速对比不同 RLHF/DPO 算法效果
- 工程团队把自研奖励模型接入现有后训练流水线
- 需要灵活替换训练与推理引擎的多机实验环境
替代项目
OpenRLHF、verl、TRL
上一篇:Model-Optimizer
下一篇:DrMAS
同类项目推荐
DataFlex
开源
训练时动态挑数据,让模型学得更快更好
[NeurIPS 2026] DataFlex: A Unified Benchmark and Evaluation Platform for Data-Centri···
AgentGym
开源
让大模型智能体在多样环境中自我进化,一键复现论文实验
Code and implementations for the ACL 2025 paper "AgentGym: Evolving Large Language M···
GuidedQuant
开源
用端到端损失引导量化,让大模型压缩后不掉点
Official PyTorch implementation of "GuidedQuant: Large Language Model Quantization v···
BloomBee
开源
多台普通设备拼起来,也能微调和跑大模型
Decentralized LLMs fine-tuning and inference with offloading
spirit-lora-trainer
开源
拖拽配置,一键训练 Flux1 LoRA,告别命令行烦恼
Spirit Lora Trainer is a robust toolkit for training Flux1-LoRA models with a focus ···
LeapAlign_Code
开源
任意步数生成高质量图像,让流匹配模型又快又好。
[CVPR2026] LeapAlign: Post-Training Flow Matching Models at Any Generation Step by B···
llm-engine
开源
自建大模型推理与微调平台,OpenAI 接口一键迁移
Scale LLM Engine public repository
sagemaker-training-toolkit
开源
把训练脚本塞进容器,SageMaker 自动跑训练并上传模型
Train machine learning models within a Docker container using Amazon SageMaker.
DAEDAL
开源
免训练,让扩散语言模型按需生成任意长度文本
[ICLR 2026] Official repository of "Beyond Fixed: Training-Free Variable-Length Deno···