spiral

让AI在对抗博弈中练出深度推理

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 23 🐛 待处理 1 👀 关注 4
GitHub ↗
GitHub 星标 ★ 211
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

spiral 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队spiral-rl
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型large-language-models,multi-agent-reinforcement-learning,reinforcement-learning,self-play
GitHub 星标★ 211
上线时间2025-06-04 00:00:00
代码更新2026-03-27
仓库体积11.4 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数5

项目介绍

SPIRAL 是一个通过多智能体多轮强化学习(RL)来提升大模型推理能力的开源框架。它基于自博弈(Self-Play)思想,在零和博弈环境中让多个智能体相互对抗、多轮交互,从而激励模型产生更深入的推理行为。项目解决了单纯依赖静态数据集训练模型推理能力不足的问题,通过动态对抗环境持续产生高难度挑战,迫使模型学习更复杂的策略和逻辑。核心能力包括:多智能体环境搭建、多轮对话对抗训练、强化学习奖励设计,以及与主流大模型(如LLaMA等)的集成。该框架特别适用于需要复杂推理、策略规划或谈判对话的场景,如棋类游戏、辩论、战略谈判等。目前项目处于早期阶段,代码结构清晰,提供了训练和评估的示例脚本,但文档和生态尚不完善。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 211

核心亮点

  • 首创将自博弈与多轮RL结合,动态生成训练数据,避免静态数据过拟合
  • 支持多智能体并行对抗,训练效率高,能自然产生难易可控的对抗样本
  • 代码模块化设计,易于扩展到不同零和博弈场景,与HuggingFace生态兼容

不足之处

  • 文档和社区待观察,缺少详细教程和API参考
  • 训练资源消耗大,对算力要求高,普通开发者难以复现

适用场景

  • 训练大模型在棋类或牌类游戏中的策略推理能力
  • 提升AI在辩论、谈判等对抗性对话中的逻辑严密性
  • 作为强化学习研究平台,探索多智能体交互下的涌现推理

替代项目

DeepMind AlphaZero、OpenAI Gym、Ray RLlib

上一篇:CUDA-L2

下一篇:MARS

同类项目推荐

DeepSpeed 开源

几行配置把单卡训练扩到多机多卡,省显存提吞吐

DeepSpeed is a deep learning optimization library that makes distributed training an···

★ 43316 2026-11-08
lora-inspector 开源

拆开 LoRA 黑盒,看清每层权重学了啥

LoRA (Low-Rank Adaptation) inspector for Stable Diffusion

★ 101 2026-09-28
neptune-client 开源

一键记录训练实验,自动追踪指标与模型,团队协作更高效

The experiment tracker for foundation model training

★ 622 2026-08-09
kikiri-tts 开源

给 Kokoro 模型加新语言,照着文档就能微调

This project provides a complete, documented training recipe for fine-tuning Kokoro-···

★ 138 2026-08-09
vime 开源

用 vLLM 加速 LLM 强化学习后训练,采样更快、规模更大

An LLM post-training framework with vLLM for RL Scaling

★ 503 2026-10-07
LlamaFactory 开源

上百种模型随意挑,教出你专属的 AI

Unified Efficient Fine-Tuning of 100+ LLMs & VLMs (ACL 2024)

★ 75971 2026-08-09
alpa 开源

写单机代码,自动跑超大模型分布式训练与推理

Training and serving large-scale neural networks with auto parallelization.

★ 3177 2026-08-09
LongCodeZip 开源

压缩长代码上下文,让模型轻松处理超长代码

LongCodeZip: Compress Long Context for Code Language Models [ASE2025]

★ 169 2026-08-09
LLMtuner 开源

几行代码微调大模型,文本语音全覆盖

FineTune LLMs in few lines of code (Text2Text, Text2Speech, Speech2Text)

★ 252 2026-08-09