FeynRL

换目标、换采样，后训练实验一套框架跑通

开源 🏷️完全免费 🔧 仅开源项目，无在线服务，需自行部署 模型训练 🍴 复刻 19 🐛 待处理 1 👀 关注 4
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 227
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费，定价信息待确认

项目预览

FeynRL 项目界面预览图
图片来源：GitHub 官方仓库名片

项目数据

分类模型训练
开发团队FeynRL-project
官网地址https://feynrl-project.github.io
GitHubhttps://github.com/FeynRL-project/FeynRL
定价模式🏷️完全免费
价格说明开源免费，定价信息待确认
访问状态🔧 仅开源项目，无在线服务，需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
GitHub 星标★ 227
上线时间2026-03-02 00:00:00
代码更新2026-10-20
仓库体积11.4 MB
本站数据更新2026-10-31
维护状态较活跃
收录时间2026-10-31
浏览次数0

项目介绍

FeynRL 是一个面向大模型后训练（post-training）的开源框架，目标是把从新目标函数到新 rollout 系统的整条链路统一起来。它解决的是后训练阶段算法实验与工程实现割裂的问题：研究者想验证新的强化学习目标或采样策略时，往往要重写训练循环、采样调度和分布式执行逻辑。FeynRL 提供可组合的抽象，让目标函数、rollout 采样、训练编排可以分别替换和扩展，从而快速搭建从算法原型到规模化训练的流程。核心能力包括：模块化的后训练目标定义、可插拔的 rollout 系统、与现有训练栈的衔接，以及面向大规模模型的分布式执行支持。项目以 Python 实现，目前处于早期阶段，适合需要做 RLHF/RLVR 类后训练实验、又希望避免重复造轮子的团队作为研究底座。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-10-31 · 当前星标 ★ 227

核心亮点

  • 把目标函数与 rollout 系统解耦，改算法不用重写训练循环
  • 面向大规模模型的分布式后训练，兼顾实验与规模化
  • Python 实现，接入现有训练栈成本较低

不足之处

  • 项目早期，星标约 227，生态与文档成熟度待观察
  • 缺少大规模生产环境的公开验证案例

适用场景

  • 研究团队快速验证新的强化学习后训练目标
  • 需要自定义 rollout 采样策略的大模型对齐实验
  • 搭建从原型到分布式训练的后训练流水线

替代项目

verl、OpenRLHF、TRL

上一篇：OpenEBFM

下一篇：JevAny

同类项目推荐

DataFlex 开源

训练时动态挑数据，让模型学得更快更好

[NeurIPS 2026] DataFlex: A Unified Benchmark and Evaluation Platform for Data-Centri···

★ 3314 2026-08-10
RLVR-World 开源

用强化学习训练能用于决策的视频生成世界模型

Official repository for "RLVR-World: Training World Models with Reinforcement Learni···

★ 281 2026-08-09
AMD-LLM 开源

在 AMD GPU 上快速跑通 1.35 亿参数语言模型训练

Training code and resources for AMD-135M language models on AMD GPUs.

★ 195 2026-08-09
FineEnvs 开源

快速搭 LLM 强化学习环境，从定义到训练一条龙

FineEnvs — RL Environments 101: building and scaling RL environments in the age of ···

★ 540 2026-09-27
EAGLE 开源

让大模型生成速度翻倍，无需牺牲输出质量

Official Implementation of EAGLE-1 (ICML'24), EAGLE-2 (EMNLP'24), and EAGLE-3 (NeurI···

★ 2564 2026-08-09
modular-diffusion 开源

像搭积木一样，快速搭建你的自定义扩散模型

Python library for designing and training your own Diffusion Models with PyTorch

★ 292 2026-08-09
quaterion 开源

几分钟搭好相似度模型训练，向量检索效果快速提升

Blazing fast framework for fine-tuning similarity learning models

★ 665 2026-09-16
Flow-Factory 开源

让流匹配模型轻松学会强化学习，生成更符合目标的结果

A unified framework for easy fine-tuning in Flow-Matching models

★ 738 2026-08-09
Composition-RL 开源

把可验证提示词自动组合，低成本扩充 RL 训练数据

[Neurips 2026] Official repository for the paper "Composition-RL: Compose Your Verif···

★ 138 2026-10-05