selfcodealign

让代码模型自己教自己,无需人工标注,自动提升生成质量。

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 24 🐛 待处理 3 👀 关注 5
GitHub ↗
GitHub 星标 ★ 325
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,Apache-2.0许可证,完全免费,可自行部署使用。

项目预览

selfcodealign 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队bigcode-project
定价模式🏷️完全免费
价格说明开源项目,Apache-2.0许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型large-language-models,llm,llm4code
GitHub 星标★ 325
上线时间2024-04-25 00:00:00
代码更新2025-02-24
仓库体积260 KB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数7

项目介绍

SelfCodeAlign 是一个面向代码生成任务的自对齐框架,核心思想是让模型通过自身生成的数据来提升代码生成能力,无需依赖人工标注或外部模型。它解决了代码大模型训练中数据获取成本高、标注困难的问题,通过从模型自身采样、过滤、执行验证和指令构建的完整流程,自动生成高质量的训练数据。该框架在 NeurIPS 2024 上发表,支持多种主流代码模型,并提供了完整的训练和评估流程。其核心能力包括:基于执行反馈的自动数据过滤、多样化的指令生成、以及跨模型的自对齐训练策略,能够显著提升模型在 HumanEval 等基准上的 pass@1 指标。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 325

技术标签

核心亮点

  • 无需人工标注或外部模型,完全自举,大幅降低数据成本
  • 通过执行验证过滤数据,保证训练数据可运行,质量高
  • 在多个代码模型上验证有效,HumanEval 指标提升显著

不足之处

  • 依赖基础模型初始能力,弱模型自举效果有限
  • 文档/社区待观察

适用场景

  • 代码大模型训练数据自动构建
  • 提升现有代码生成模型的指令遵循能力
  • 低资源场景下代码模型自进化

替代项目

CodeRL、Self-Instruct、WizardCoder

上一篇:rlhf-summary-notes

下一篇:SimPO

同类项目推荐

lora-prompt-tool 开源

管理 LoRA 触发词,自动补全提示词,提升出图效率。

A Stable Diffusion webUI extension for manage trigger word for LoRA or other model

★ 256 2026-08-09
train-llm-from-scratch 开源

从数据到生成,手把手教你训练自己的大模型

A straightforward method for training your LLM, from downloading data to generating ···

★ 13163 2026-08-09
train-deepseek-r1 开源

手把手从零实现 DeepSeek R1,看懂并跑通核心代码

Building DeepSeek R1 from Scratch

★ 805 2026-08-09
RecLM 开源

用自然语言指令微调,让推荐模型更懂你

[ACL2025] "RecLM: Recommendation Instruction Tuning"

★ 113 2026-08-09
Primus 开源

在 AMD GPU 上高效训练大模型,开箱即用

A flexible and high-performance training framework designed for large-scale foundati···

★ 140 2026-09-19
mantis 开源

轻量级时间序列分类基础模型,小样本也能精准分类

Mantis: Lightweight Foundation Model for Time Series Classification

★ 161 2026-08-09
TinyEngram 开源

给大模型装上长期记忆,让对话和生成更连贯

Research of DeepSeek Engram Architecture based on Qwen-3 and Stable Diffusion series···

★ 1343 2026-08-09
ColossalAI 开源

让大模型训练部署更便宜、更快速,普通硬件也能玩转AI大模型。

Making large AI models cheaper, faster and more accessible

★ 41429 2026-08-09
INTERS 开源

给大模型注入搜索能力,让检索结果更精准

This is the repository for our paper "INTERS: Unlocking the Power of Large Language ···

★ 208 2026-08-09