raga-llm-hub

一站式搞定 LLM 评估、防护与安全,让上线更放心

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 基础设施 🍴 复刻 14 🐛 待处理 2 👀 关注 1
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 115
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源框架,本地部署,完全免费。

项目预览

raga-llm-hub 项目界面预览图
图片来源:项目官网

项目数据

分类基础设施
开发团队raga-ai-hub
定价模式🏷️完全免费
价格说明开源框架,本地部署,完全免费。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议NOASSERTION
主要语言Python
技术栈/模型guardrails,llm-evaluation,llm-security,llmops
GitHub 星标★ 115
上线时间2024-03-02 00:00:00
代码更新2024-09-09
仓库体积1.3 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数7

项目介绍

raga-llm-hub 是一个用于大语言模型(LLM)评估、防护栏(guardrails)和安全的开源框架,基于 Python 构建。它旨在解决 LLM 应用在生产环境中面临的可靠性、安全性和合规性问题,提供一套统一的工具链来测试和监控模型输出。其核心能力包括:自动化评估 LLM 输出质量(如准确性、有害性)、定义和执行防护规则以拦截不当内容、以及检测提示注入等安全威胁。该框架设计为模块化,易于集成到现有 LLM 应用流程中,帮助开发者和安全团队在部署前和运行中持续保障模型行为的安全与合规。作为早期项目,它聚焦于将评估、防护和安全一体化,简化 LLM 应用治理的复杂度。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 115

核心亮点

  • 将评估、防护栏和安全检测整合在一个框架内,减少多工具集成成本
  • 基于 Python,易于二次开发和嵌入现有 LLM 流水线
  • 针对 LLM 特有的安全问题(如提示注入)提供专门支持

不足之处

  • 文档/社区待观察
  • 早期项目,功能成熟度和稳定性有待验证

适用场景

  • LLM 应用上线前的质量与安全评估
  • 生产环境中实时拦截有害或违规输出
  • 安全团队对 LLM 进行合规审计与风险监控

替代项目

LangKit、Guardrails AI、Rebuff

上一篇:parea-sdk-py

下一篇:empirical

同类项目推荐

LLMRouterBench 开源

把各家大模型路由方法拉到同一张考卷上比高低

[Findings@ACL'26] LLMRouterBench: A Massive Benchmark and Unified Framework for LLM ···

★ 132 2026-10-26
LLMEval-1 开源

17类453题+2186人标注,中文大模型评测数据即取即用

[AAAI 2024] LLMEval Phase I dataset — 17 categories, 453 questions, 2186 annotators···

★ 114 2026-10-23
dodoguard 开源

给 AI Agent 加一道全流程安全护栏,防注入防越权

DodoGuard: Take AI Agents to Production. Test, validate, and operate AI Agents befor···

★ 276 2026-09-15
XSafeClaw 开源

给 AI 智能体装上安全盾,自动红队测试找漏洞

Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University

★ 165 2026-08-10
EasyJailbreak 开源

一键生成越狱提示词,快速测评大模型安全防线

An easy-to-use Python framework to generate adversarial jailbreak prompts.

★ 943 2026-09-02
nannyml 开源

模型上线后,用 nannyml 自动盯漂移和性能,提前报警

nannyml: post-deployment data science in python

★ 2161 2026-08-09
PromptInject 开源

模块化组装提示词,量化评估LLM对抗攻击的鲁棒性。

PromptInject is a framework that assembles prompts in a modular fashion to provide a···

★ 528 2026-08-09