benchflow

一键搭建 RL 训练与评测流水线,省去重复造轮子

开源 🏷️定价信息待确认 ✅ 目前可打开 评测安全 🍴 复刻 73 🐛 待处理 117 👀 关注 2
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 363
维护状态 活跃
是否开源 开源
定价模式 🏷️定价信息待确认

项目预览

benchflow 项目界面预览图
图片来源:项目官网

项目数据

分类评测安全
开发团队benchflow-ai
定价模式🏷️定价信息待确认
价格说明定价信息待确认
访问状态✅ 目前可打开
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型benchmark,evals
GitHub 星标★ 363
上线时间2025-01-21 00:00:00
代码更新2026-11-08
仓库体积73.5 MB
本站数据更新2026-11-08
维护状态活跃
收录时间2026-08-10
浏览次数8

项目介绍

benchflow 是一个面向强化学习(RL)研究的开源基础设施,旨在简化 RL 环境的创建、后训练(post-training)和评测(evals)流程。它解决了研究者在构建自定义 RL 环境、集成训练循环以及标准化评估时面临的重复劳动和工具碎片化问题。核心能力包括:提供统一的接口来定义和封装 RL 环境,支持与主流 RL 框架(如 Gymnasium)无缝对接;内置后训练流程的编排工具,方便用户进行微调、奖励设计等操作;以及一套灵活的评测模块,允许用户自定义指标和基准测试,并自动生成报告。项目采用 Python 编写,技术栈聚焦于 benchmark 和 evals,目前处于早期阶段(GitHub 星标 317),但设计理念清晰,适合需要快速搭建 RL 实验管线的研究团队和个人开发者。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-10 · 当前星标 ★ 363

技术标签

核心亮点

  • 统一环境接口,兼容 Gymnasium,降低环境接入成本
  • 内置后训练编排,支持微调和奖励设计,加速迭代
  • 评测模块可自定义指标,自动生成报告,提升结果可复现性

不足之处

  • 项目早期,文档和社区支持尚待完善
  • 生态尚未成熟,与主流 RL 框架的集成深度有限

适用场景

  • 学术研究中快速构建 RL 实验环境并对比算法
  • 企业内部搭建强化学习评测平台,统一基准测试
  • 教学场景中用于 RL 课程作业的标准化评估

替代项目

Gymnasium、RLlib、Stable-Baselines3

上一篇:awesome-evals

下一篇:AutomationBench

同类项目推荐

DeepSec 开源

AI 写码,DeepSec 把关,实时防漏洞,自动测安全。

DeepSec — AI Security Offense & Defense Platform. Shield audits AI-generated code f···

★ 510 2026-08-09
RAGElo 开源

用 Elo 对战排名,快速选出最强 RAG 智能体

RAGElo is a set of tools that helps you selecting the best RAG-based LLM agents by u···

★ 133 2026-10-02
Aegis 开源

给 AI 代理加装安全护栏,零代码实现审计、审批和紧急停机。

Runtime policy enforcement for AI agents. Cryptographic audit trail, human-in-the-lo···

★ 523 2026-08-10
ClassEval 开源

测大模型写类的能力,比单函数更接近真实编程

Benchmark ClassEval for class-level code generation.

★ 154 2026-08-09
hawk 开源

把 Inspect AI 评测搬到云端批量跑

Run Inspect AI evals in the cloud

★ 105 2026-11-05
awesome-MLSecOps 开源

一站式查找 AI/ML 安全工具,快速构建防御体系

A curated list of MLSecOps tools and resources for securing machine learning and AI ···

★ 490 2026-08-09
MLLM-Token-Compression 开源

一页看懂多模态大模型Token压缩方案怎么选

Towards Efficient Multimodal Large Language Models: A Survey on Token Compression

★ 229 2026-09-15
awesome-security-for-ai 开源

一站式导航AI安全工具,快速选型不踩坑

Awesome products for securing AI systems includes open source and commercial options···

★ 91 2026-08-09
content-seal 开源

给AI生成的音视图文打上隐形来源标记

Content Seal is a state-of-the-art framework for invisible, robust watermarking acro···

★ 243 2026-11-07