jevals

每条 trace 一次请求,几分钱延迟低到能进 Agent 循环

jevals 是一个面向 AI Agent 的评测与护栏(guardrails)工具,核心思路是把每一次 Agent 调用建模为一次 Jev 决策:每个 trace 只发一个请求,成本约几分之一美分,延迟低到能塞进 Agent 主循环里实时运行。它解决的是传统评测框架太重、太慢、太贵的问题——RAGAS 等方案通常需要批量离线跑,无法在 Agent 每一步动作前后做即时判断。jevals 支持本地运行,可搭配 Kev 或 Laya 使用,技术栈为 Python,标签覆盖 agents、evals、guardrails、LLM evaluation 与类型安全。典型用途包括:在 Agent 输出前拦截不安全内容、对工具调用结果做质量打分、对 RAG 检索片段做相关性判定,以及持续监控线上 Agent 行为。因为单 trace 单请求的设计,它既能当评测器也能当运行时护栏,适合需要低延迟、低成本、可嵌入循环的 Agent 工程团队。

开源 free 评测安全
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 102
维护状态 活跃
是否开源 是
定价模式 free

项目预览

项目数据

分类评测安全
开发团队openlayer-ai
所属国家
定价模式free
价格说明开源项目,定价信息待确认
访问状态
是否开源是
开源协议MIT
主要语言Python
技术栈/模型agents,evals,guardrails,jev,llm,llm-evaluation,ragas,typesafe
GitHub 星标★ 102
30天Star增速
HF 下载量
上线时间2026-09-20 00:00:00
代码更新—
仓库体积—
本站数据更新—
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-10-03
浏览次数0

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

正在加载星标数据…

技术标签

使用教程

—

核心亮点

  • 单 trace 单请求,成本低至几分之一美分,适合高频调用
  • 延迟足够低,可直接嵌入 Agent 主循环做实时护栏而非离线批跑
  • 支持本地运行,可搭配 Kev 或 Laya,数据不出本地

不足之处

  • 项目早期,星标仅 102,生态与文档成熟度待观察
  • 依赖 Kev/Laya 等配套组件,独立使用门槛可能偏高

适用场景

  • Agent 输出前实时拦截不安全或不合规内容
  • 对工具调用返回结果做即时质量打分与重试决策
  • RAG 检索片段相关性判定,过滤低质上下文

替代项目

RAGAS、DeepEval、Guardrails AI

项目介绍

jevals 是评测安全领域的开源项目,由 openlayer-ai 开发,是 2026 年新上线的项目。

它收录于评测安全分类,该分类目前共有 488 个项目,GitHub 星标数为 102。

项目目前处于活跃维护状态,最近一次代码更新于 2026-10-01。开源项目。

它主要面向的使用场景是:Agent输出前实时拦截不安全或不合规内容。同类可对比的替代方案包括 RAGAS、DeepEval、Guardrails AI。

上一篇:open_asr_leaderboard

下一篇:没有了!

同类项目推荐

akto 开源

给 AI 应用做安全体检,防提示注入和数据泄露

Akto is the fastest growing AI Security platform for your teams to secure AI agents,···

★ 1521 2026-08-20
XSafeClaw 开源

给 AI 智能体装上安全盾,自动红队测试找漏洞

Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University

★ 164 2026-08-10
deepteam 开源

自动模拟越狱攻击,提前测出 LLM 安全漏洞

DeepTeam is a framework to red team LLMs and AI agents.

★ 2975 2026-09-12