项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整
数据来源：GitHub API 逐日快照 · 收录于 2026-09-14 · 当前星标 ★ 115
核心亮点
- 本地运行，不依赖外部服务，测试数据不外泄
- 覆盖越狱和提示注入两类主流攻击面
- 支持自定义目标接口，可接入自家聊天机器人或智能体
不足之处
- 项目处于早期，星标仅104，社区和文档积累有限
- 攻击用例库规模未知，可能不够全面
- 缺少与CI/CD流水线的集成示例
适用场景
- AI产品上线前做安全回归测试
- 安全团队对内部聊天机器人进行红队演练
- 研究人员对比不同模型对越狱攻击的鲁棒性
替代项目
garak、PyRIT、promptfoo
上一篇：nordef-matrix-open-control
下一篇：InferenceX
同类项目推荐
workshop
开源
让编码代理自己写评测、跑评测，回归验证不再靠手测
Give your coding agent the power to write and run agent evals.
langwatch
开源
一站式搞定LLM评估与智能体测试，从开发到上线全程可控
Open-Source Agent Observability & Evals for AI Platform teams. Trace, test, route an···
MMAD
开源
用统一基准测出多模态大模型在工业质检中的真实水平
The Codes and Data of A Comprehensive Benchmark for Multimodal Large Language Models···
RVCBench
开源
给语音克隆模型做安全体检，防伪造保隐私
Comprehensive voice cloning evaluation: seven automatic speech metrics and ready-to-···
coir
开源
给代码检索模型做全面体检，一张卷子测出真实力。
(ACL 2025 Main) A Comprehensive Benchmark for Code Information Retrieval.
vestige
开源
给AI智能体装黑匣子，每步操作可查可证
Think before doing, prove before saving. Vestige is the local-first cognitive operat···
MixEval
开源
动态更新评测数据，让模型分数不再虚高
The official evaluation suite and dynamic data release for MixEval.
tool-retrieval-benchmark
开源
测测你的检索模型会不会挑工具，让LLM用对工具
Official code for ACL2025 " Retrieval Models Aren’t Tool-Savvy: Benchmarking Tool R···
fusion_bench
开源
一站式评估和实现深度模型融合，快速对比多种融合算法效果
FusionBench: A Comprehensive Benchmark/Toolkit of Deep Model Fusion