评测安全

openbench 开源 免费 仅开源

同一模型，不同封装，一测便知谁更省更快更准。

openbench 是一个从零构建的基准测试项目，用于横向对比不同编码智能体框架（如 codex、pi、openco···

ai-eval-platform 开源 免费 仅开源

一站式评测 AI 应用，让质量看得见

这是一个开源的 AI 应用评测平台，专注于解决 RAG、AI Agent、多轮对话等复杂场景的评估难题。它提···

primitive-bench 开源 按量 可打开

声明任务先定价，AI 干完验证，不成退款

primitive-bench 是一个面向 AI 智能体结果的可验证评测与交付层。它把「任务」当作商品：用户声明···

GateMem 开源 免费 仅开源

评测多主体共享记忆 Agent 的权限与隐私治理

GateMem 是一个面向多主体共享记忆 LLM Agent 的基准与评测工具包，聚焦「记忆治理」这一安全与隐私···

autoguardrails 开源 免费 仅开源

用 policy.md 自动搜索最优 LLM 护栏策略

AutoGuardrails 是一个面向 LLM 护栏的 alignment-research 脚手架，采用 autoresearch 风格，在单···

halo-record 开源 免费 仅开源

给 AI 代理装上防篡改黑匣子，操作记录人人可验

halo-record 是一个为 AI 智能体提供防篡改运行时证据的 Python 库。它通过哈希链技术生成不可篡改···

Awesome-Offensive-AI-Agentic-Landsca··· 开源 免费 仅开源

一张图看懂 AI 攻防：渗透、红队、漏洞发现全收录

这是一个面向 AI 攻防安全领域的资源汇总清单，系统整理了开源项目、学术论文、能力基准测试以及国···

claw-swe-bench 开源 免费 仅开源

统一接口跑 SWE-bench，横向比出哪个 agent 框架更能修 bug

claw-swe-bench 是一个面向 SWE-bench 的评测适配框架，专门用来评估各类智能体执行框架（作者称之···

ko-pii 开源 免费 仅开源

韩语文本敏感信息检测与脱敏，一条命令搞定

ko-pii 是一个面向韩语文本的 PII（个人可识别信息）检测与假名化 Python 库，主要解决韩语场景下敏···

Doberman-Core 开源 免费 仅开源

给 AI 智能体装上安全锁，防提示注入，控工具权限

Doberman-Core 是一个面向 AI 智能体的安全框架，专注于解决 LLM 应用中的安全防护问题。它提供提示···

Doberman-Core 开源 免费 仅开源

运行时拦截 AI 的每个动作，防止危险操作执行

Doberman-Core 是一个面向 AI 代理的运行时安全防护库，定位为“AI 的看门狗”。它解决的是 LLM 应···

agentjail 开源 可打开

给AI编程助手装上安全锁，每次操作先过检再执行

agentjail 是一个为编码智能体（如 Claude Code、Codex、Cursor）提供策略护栏的开源工具。它解决的···

Tracely 开源 免费+付费 可打开

把生产事故变成 CI 回归测试，自动拦截坏 PR

Tracely 是一个面向 AI 智能体的原生 CI/CD 工具，旨在解决 LLM 应用在生产环境中失败后难以复现和···

Tracely-ai 开源 免费+付费 可打开

把生产事故变成回归测试，合并前自动拦截 AI 故障

Tracely-ai 是一个面向 AI 代理（agent）的 CI/CD 原生可观测与评测工具，旨在解决 AI 应用在生产环···

exploitgym 开源 免费 仅开源

用真实漏洞测 AI 能不能写出能跑的利用代码

ExploitGym 是一个大规模、贴近真实场景的漏洞利用基准测试集，基于真实世界披露的漏洞构建，专门用···

AgentGuard 开源 可打开

给 AI Agent 装上零信任安全闸门，防越权、防泄露

AgentGuard 是一个面向 AI Agent 的零信任安全基础框架，旨在解决大模型智能体在自主执行任务时面临···

awesome-ai-security-tools 开源 免费 仅开源

一页清单，快速定位 AI 安全各细分方向的可用工具

这是一个面向 AI 安全与 AI 辅助网络安全的精选工具清单，把公开源码、学术研究和商业产品按用途分···

safelabs-eval 开源 不稳定

给 AI 智能体做红队体检，上线前先找出被越狱和注入的漏洞

safelabs-eval 是一个面向 AI 智能体的红队测试与评测框架，核心目标是把 OWASP ASI（Agentic Secu···

tts-bench 开源 免费 仅开源

一键跑遍主流 TTS，比速度、留样本

tts-bench 是一个面向文本转语音（TTS）模型的统一速度与样本基准测试工具，支持 Windows、Linux 和···

ActPlane 开源 不稳定

用 eBPF 管住 AI Agent 的数据流，防泄露防乱来

ActPlane 是一个用 C 语言编写的 eBPF 信息流强制（IFC）框架，专为 AI Agent 的安全、安保和有效性···

VibeSearchBench 开源 免费 仅开源

专治搜索系统'听不懂人话'，用200个模糊任务测出真实力

VibeSearchBench 是一个面向真实世界复杂搜索场景的基准测试集，旨在评估和推动搜索系统在模糊、多···

Robust-U1 开源 免费 仅开源

让多模态模型自己修复坏图，理解不翻车

Robust-U1 是 ICML 2026 论文的官方实现，聚焦多模态大语言模型（MLLMs）在视觉内容受损时的自恢复···

nemo-helix 开源 可打开

让上线的 AI Agent 更快更准更安全

NeMo Helix 是 NVIDIA 推出的 AI Agent 全生命周期优化工具，聚焦于让上线的智能体更快、更准、更安···

pii-guardrail-browser-extension 开源 免费 待核验

粘贴前自动抹掉敏感信息，放心用 AI 对话

Privacy Guardrail 是一个本地优先的 Chrome 扩展，在用户把文本粘贴进 ChatGPT、Claude 或 Gemini···