NeoHorse 是模型训练领域的开源项目,由 TokenRhythm 开发,是 2026 年新上线的项目。
它收录于模型训练分类,该分类目前共有 518 个项目,GitHub 星标数为 738。
项目目前处于活跃维护状态,最近一次代码更新于 2026-09-21。开源项目。
它主要面向的使用场景是:研究LLM递归自我改进与自动化后训练流程。同类可对比的替代方案包括 OpenRLHF、verl、TRL。

让模型自己出题、自己训练、自己变强
NeoHorse 是一个面向大语言模型后训练(post-training)的开源研究项目,核心思路是通过「智能体式后训练」与「路由挂架(Routing Harness)」实现递归自我改进(Recursive Self-Improvement,RSI)。它试图解决传统后训练流程中数据构造、能力评估与模型迭代彼此割裂的问题:让模型以智能体方式主动生成训练任务、执行推理、收集反馈,再由路由机制把不同任务分派给最合适的策略或模型分支,从而形成「训练—评估—再训练」的闭环,让模型在多轮迭代中持续提升。项目聚焦于把后训练从一次性流水线变成可自我驱动的循环系统,适合研究自我改进、智能体训练与自动化数据飞轮方向。当前处于早期阶段,代码与实验细节仍在完善,社区规模较小,但概念方向与 RSI 热点高度契合,值得关注后续论文与复现结果。
OpenRLHF、verl、TRL
NeoHorse 是模型训练领域的开源项目,由 TokenRhythm 开发,是 2026 年新上线的项目。
它收录于模型训练分类,该分类目前共有 518 个项目,GitHub 星标数为 738。
项目目前处于活跃维护状态,最近一次代码更新于 2026-09-21。开源项目。
它主要面向的使用场景是:研究LLM递归自我改进与自动化后训练流程。同类可对比的替代方案包括 OpenRLHF、verl、TRL。
上一篇:trl
Long-RL
开源
让强化学习轻松驾驭超长序列,训练更稳更快
Long-RL: Scaling RL to Long Sequences (NeurIPS 2025)
TPA
开源
把注意力复杂度从平方降到线性,长序列不再卡顿
[NeurIPS 2025 Spotlight] TPA: Tensor ProducT ATTenTion Transformer (https://arxiv.or···
minimind
开源
两小时造出你的小模型,练手入门不求人
Train a 64M-parameter LLM from scratch in just 2h!
pruna
开源
一键优化 AI 模型,推理提速又省资源。
Pruna is a model optimization framework built for developers, enabling you to delive···