VADER

用奖励梯度微调视频模型,让生成结果更合你心意

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 视频生成 🍴 复刻 15 🐛 待处理 12 👀 关注 6
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 318
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,代码公开,可自行部署使用,无付费版本。

项目预览

VADER 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队mihirp1998
定价模式🏷️完全免费
价格说明开源项目,代码公开,可自行部署使用,无付费版本。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Python
技术栈/模型alignment,diffusion,reinforcement-learning,reinforcement-learning-human-feedback,rl,rlhf,vader,video-diffusion,video-diffusion-alignment
GitHub 星标★ 318
上线时间2024-06-23 00:00:00
代码更新2025-03-12
仓库体积167.4 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

VADER 是一个用于视频扩散模型对齐的开源项目,通过奖励梯度(Reward Gradients)对预训练的视频生成模型进行微调,以提升生成视频的质量和与人类偏好的对齐度。它支持多种主流视频扩散模型,如 VideoCrafter、OpenSora、ModelScope 和 StableVideoDiffusion,并集成多种奖励模型(如 HPS、PickScore、VideoMAE、VJEPA、YOLO、Aesthetics 等),用于评估和优化生成结果。该项目解决了视频生成中缺乏高质量奖励信号、难以直接优化人类偏好等问题,提供了一套基于强化学习(RLHF)的微调框架。核心能力包括:灵活的奖励模型集成、对多种视频模型的适配、以及基于梯度更新的高效对齐训练。VADER 适用于视频生成模型的后期优化,帮助研究者和开发者在不改变模型架构的前提下,显著提升生成视频的视觉质量、语义一致性和用户满意度。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 318

核心亮点

  • 支持多种主流视频扩散模型,如 OpenSora、VideoCrafter,适配性强
  • 集成多种奖励模型(HPS、PickScore、YOLO 等),可灵活组合优化目标
  • 基于奖励梯度的微调方法,相比传统 RL 更高效,训练成本较低

不足之处

  • 项目处于早期阶段,文档和社区支持尚待完善
  • 依赖多个外部模型和奖励模型,环境配置复杂度较高

适用场景

  • 视频生成模型的后训练优化,提升生成视频的美学质量和语义一致性
  • 针对特定场景(如人物动作、物体检测)定制视频生成模型
  • 研究视频扩散模型与人类偏好对齐的方法论

替代项目

Diffusion-DPO、VideoReward、RLHF-V

上一篇:CogKit

下一篇:OpenSeq2Seq

同类项目推荐

halo 开源

一套框架搞定 LLM 与多模态的微调和强化学习训练

Halo is an open-source framework built by White Circle for training large language a···

★ 853 2026-09-25
MambaInLlama 开源

把 Llama 蒸馏成混合模型,推理更快更省内存

[NeurIPS 2024] Official Repository of The Mamba in the Llama: Distilling and Acceler···

★ 244 2026-08-09
AutoGPTQ 开源

一键量化大模型,显存减半推理加速

An easy-to-use LLMs quantization package with user-friendly apis, based on GPTQ algo···

★ 5067 2026-08-09
LLaMEA 开源

让大模型自动进化出更优算法,省去手工调参。

Large Language Model Evolutionary Algorithm

★ 133 2026-09-15
merge-models 开源

按比例融合两个扩散模型,快速生成新风格模型

Merges two latent diffusion models at a user-defined ratio

★ 262 2026-08-09
transformerlab-app 开源

一站式搞定大模型训练、微调和评估,从笔记本到集群无缝扩展

The open source research environment for AI researchers to seamlessly train, evaluat···

★ 5200 2026-08-10
Open-LLaVA-NeXT 开源

开源复现 LLaVA-NeXT,快速训练你的多模态对话模型

An open-source implementation for training LLaVA-NeXT.

★ 438 2026-08-09