RSIBench-Data

一键生成代码评测数据并在沙箱里跑分

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 数据集 🍴 复刻 9 🐛 待处理 7 👀 关注 4
GitHub ↗
GitHub 星标 ★ 179
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源项目,免费使用

项目预览

RSIBench-Data 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类数据集
开发团队evolvent-ai
定价模式🏷️完全免费
价格说明开源项目,免费使用
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Shell
GitHub 星标★ 179
上线时间2026-07-25 00:00:00
代码更新2026-08-25
仓库体积38.2 MB
本站数据更新2026-11-04
维护状态维护中
收录时间2026-09-12
浏览次数2

项目介绍

RSIBench-Data 是一个面向代码智能体(coding agent)评测的数据集与配套基础设施项目,核心是围绕 E2B 沙箱环境构建合成数据生成、模型后训练以及基准测试评估的完整流程。它解决的是当前代码智能体评测缺乏统一、可复现、可扩展数据管线的问题:开发者往往需要自己拼凑任务生成、环境隔离和结果打分环节。该项目提供 Shell 脚本驱动的自动化流程,能够批量生成合成任务、在隔离沙箱中执行模型输出、并汇总评测指标,从而让研究者可以快速对比不同模型或训练策略在代码任务上的表现。它同时兼顾数据生成与后训练两个阶段,适合需要自建评测闭环的团队。项目语言以 Shell 为主,说明其定位偏工程化编排,而非算法实现,上手门槛相对可控,但需要熟悉 E2B 沙箱和基础命令行操作。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-09-12 · 当前星标 ★ 179

核心亮点

  • 把合成数据生成、后训练和 E2B 沙箱评测串成一条可复现的 Shell 流水线,省去自己搭评测环境
  • 基于 E2B 隔离沙箱执行代码,评测结果更接近真实运行环境而非静态匹配
  • 同时覆盖数据生成与模型后训练两个环节,适合做端到端的代码智能体迭代实验

不足之处

  • 项目处于早期阶段,星标仅 153,文档和示例可能不够完整
  • 强依赖 E2B 沙箱服务,离线或自建环境使用成本较高

适用场景

  • 研究团队需要快速搭建代码智能体基准评测闭环
  • 模型后训练阶段批量生成合成代码任务数据
  • 对比不同代码模型在隔离沙箱中的真实执行表现

替代项目

SWE-bench、HumanEval

上一篇:GraphGen

下一篇:somali-language-standard

同类项目推荐

OntoAligner 开源

上传两个本体,一键生成语义映射关系。

OntoAligner: A Python Toolkit for Ontology Alignment https://pypi.org/project/OntoAl···

★ 99 2026-08-09
bible 开源

90版35语圣经文本,JSON/XML 直接拿去用

Bible text in JSON and XML — 141 versions across 85 languages, ready for apps, vers···

★ 780 2026-09-28
lora-dataset-studio 开源

一站式搞定 LoRA 数据集制作、训练与测试,本地免费运行

Self-hosted, one-tab workbench for the whole training lifecycle: build Character/Con···

★ 332 2026-08-09
synthea 开源

一键生成百万级合成病人数据,告别隐私合规烦恼

Synthetic Patient Population Simulator

★ 3437 2026-08-10
TTS-dataset-tools 开源

上传音频和文本,自动切分对齐,快速生成 TTS 数据集。

Automatically generates TTS dataset using audio and associated text. Make cuts under···

★ 52 2026-08-09
datalad 开源

用Git方式管理大型数据和代码,实现可复现科研

Keep code, data, containers under control with git and git-annex

★ 673 2026-08-13
ldbc_snb_datagen_spark 开源

按 LDBC 标准一键生成 TB 级社交图测试数据

Synthetic graph generator for the LDBC Social Network Benchmark, running on Spark

★ 185 2026-10-20