ReAlign

换个数据格式,让模型更听话

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 8 👀 关注 2
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 111
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,无官网,需自行部署,完全免费。

项目预览

ReAlign 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队GAIR-NLP
定价模式🏷️完全免费
价格说明开源项目,无官网,需自行部署,完全免费。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言JavaScript
技术栈/模型alignment,generative-ai,large-language-models,llms,natural-language-processing,nlp
GitHub 星标★ 111
上线时间2023-06-05 00:00:00
代码更新2024-09-23
仓库体积38.5 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数7

项目介绍

ReAlign 是一个专注于大语言模型对齐(Alignment)的开源项目,核心思路是“重新格式化对齐”——即通过改变训练数据的格式或结构来提升模型的对齐效果,而非仅仅依赖传统的指令微调或人类反馈强化学习。它解决的是当前对齐方法成本高、效率低、效果不稳定等问题,提供了一套更轻量、可复现的对齐流程。项目用 JavaScript 实现,可能涉及数据处理、训练管线编排或接口封装,方便开发者集成到现有模型训练流程中。目前处于早期阶段,星标数较少,但概念新颖,适合对对齐技术前沿感兴趣的开发者探索。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 111

核心亮点

  • 提出“重格式化对齐”新思路,区别于传统RLHF,降低对齐成本
  • 基于JavaScript实现,便于Web生态集成和前端开发者上手
  • 早期项目,代码结构简单,易于理解和二次开发

不足之处

  • 文档/社区待观察
  • 项目处于早期,功能完整性和稳定性未经验证

适用场景

  • 研究大模型对齐技术的新方法
  • 在现有训练流程中尝试低成本对齐优化
  • 教学演示对齐概念和数据处理

替代项目

TRL (Transformer Reinforcement Learning)、LLaMA-Factory、Axolotl

同类项目推荐

privacy 开源

给模型训练加隐私锁,敏感数据也能放心训

Library for training machine learning models with privacy for training data

★ 2038 2026-10-17
PERSIA 开源

多机并行训练大规模推荐模型

High performance distributed framework for training deep learning recommendation mod···

★ 410 2026-10-31
lora-prompt-tool 开源

管理 LoRA 触发词,自动补全提示词,提升出图效率。

A Stable Diffusion webUI extension for manage trigger word for LoRA or other model

★ 256 2026-08-09
qwix 开源

JAX 模型一键低比特量化,省显存提速

a Jax quantization library

★ 142 2026-10-17
Spatial-SSRL 开源

让AI看懂空间关系,无需人工标注,强化学习自动提升空间推理。

[CVPR 2026] Official release of "Spatial-SSRL: Enhancing Spatial Understanding via S···

★ 141 2026-08-09
CICD-for-Machine-Learning 开源

用GitHub Actions一键跑通模型训练到部署全流程

A beginner's project on automating the training, evaluation, versioning, and deploym···

★ 123 2026-08-09
GEM 开源

微调时保住模型创造力,让生成不再千篇一律

Code for Paper (Preserving Diversity in Supervised Fine-tuning of Large Language Mod···

★ 62 2026-08-09
WaDi 开源

一步生成高质量图像,蒸馏时精准把控权重方向

[CVPR 2026] Official PyTorch implementation of WaDi: Weight Direction-aware Distilla···

★ 128 2026-08-09
FedML 开源

一键跨云调度,轻松搞定分布式与联邦学习

FEDML - The unified and scalable ML library for large-scale distributed training, mo···

★ 4071 2026-08-09