Satori

用强化学习让大模型学会自主搜索推理路径,提升复杂问题解决能力

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 5 🐛 待处理 1 👀 关注 6
GitHub ↗
GitHub 星标 ★ 114
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源模型,Apache-2.0 许可证,可自由使用,无付费版本。

项目预览

Satori 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队satori-reasoning
定价模式🏷️完全免费
价格说明开源模型,Apache-2.0 许可证,可自由使用,无付费版本。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型large-language-models,reasoning,reinforcement-learning
GitHub 星标★ 114
上线时间2025-02-04 00:00:00
代码更新2025-06-03
仓库体积545 KB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数5

项目介绍

Satori是一个基于强化学习的开源模型,旨在通过链式动作思维(Chain-of-Action-Thought)增强大语言模型的推理能力。它由ICML 2025论文提出,核心思路是将推理过程建模为自回归搜索,利用强化学习让模型学会在动作序列中探索和回溯,从而提升复杂推理任务的表现。Satori解决了传统监督微调在推理泛化上的局限,使模型能够自主发现有效的推理路径,而不仅限于模仿训练数据。其核心能力包括:支持可验证奖励的强化学习训练、动态调整推理步数、以及结合搜索策略的推理优化。项目代码基于Python实现,适合研究者和工程师在数学、逻辑、代码生成等需要多步推理的场景中应用。目前项目处于早期阶段,星标数114,但提供了完整的训练和推理流程,便于复现和二次开发。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 114

核心亮点

  • 提出链式动作思维框架,将推理转化为可学习的自回归搜索,创新性强
  • 基于强化学习而非单纯模仿,能泛化到未见过的推理任务
  • 代码结构清晰,提供训练和推理脚本,便于复现ICML论文结果

不足之处

  • 项目处于早期,文档和社区支持待观察
  • 训练资源需求可能较高,对硬件要求不明确

适用场景

  • 数学证明与复杂计算题的自动求解
  • 代码生成与调试中的多步逻辑推理
  • 需要可解释推理路径的问答系统

替代项目

DeepSeek-R1、OpenAI o1、STaR

上一篇:Time-R1

下一篇:RecLM

同类项目推荐

STEPQuant 开源

定位循环状态量化误差,让低比特 LLM 更稳

STEPQuant: When and Where Errors Matter in Delta-Rule Recurrent State Quantization

★ 104 2026-10-31
CogKit 开源

给视频生成模型做微调和推理,快速定制专属视频生成能力。

Finetuning and inference tools for the CogView4 and CogVideoX model series.

★ 133 2026-08-09
xmtf 开源

多任务微调,让模型学会跨语言举一反三

Crosslingual Generalization through Multitask Finetuning

★ 534 2026-08-09
Dreambooth 开源

用几张照片微调扩散模型,让AI学会画你的专属对象

Fine-tuning of diffusion models

★ 97 2026-08-09
WorldDistill 开源

把视频生成大模型蒸馏成小快模型,少步数出片

**A unified toolkit for distilling and accelerating video generation models and worl···

★ 60 2026-09-29
LLaMEA 开源

让大模型自动进化出更优算法,省去手工调参。

Large Language Model Evolutionary Algorithm

★ 133 2026-09-15
gflownet 开源

按奖励比例采样多样化候选解的生成模型框架

Generative Flow Networks - GFlowNet

★ 354 2026-11-03
Matlab-GAN 开源

用 MATLAB 跑通多种 GAN,从入门到 CycleGAN 一步到位

MATLAB implementations of Generative Adversarial Networks -- from GAN to Pixel2Pixel···

★ 209 2026-08-09
PyTorch-CycleGAN 开源

用无配对图片训练,轻松实现风格迁移和图像转换

A clean and readable Pytorch implementation of CycleGAN

★ 1319 2026-08-09