AgentEval

用 .NET 原生工具,给 AI Agent 做全面体检和红队测试。

AgentEval 是一个面向 .NET 生态的 AI Agent 评测工具包,旨在为 .NET 开发者提供与 Python 生态中 RAGAS、PromptFoo、DeepEval 等工具对标的能力。它主要解决 .NET 环境下 Agent 应用缺乏系统性评测手段的问题,覆盖工具调用验证、RAG 质量指标、随机性评估、模型对比等核心场景。AgentEval 深度集成 Microsoft Agent Framework (MAF) 和 Microsoft.Extensions.AI,提供从单元测试到红队演练的完整评测工作流,帮助开发者量化 Agent 的可靠性、安全性和性能。项目处于早期阶段,但定位清晰,直接填补了 .NET 在 Agent 评测领域的空白。

开源 free 评测安全
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 146
维护状态 活跃
是否开源 是
定价模式 free

项目数据

分类评测安全
开发团队AgentEvalHQ
所属国家
定价模式free
价格说明开源项目,MIT许可证,完全免费,无付费版本。
访问状态
是否开源是
开源协议MIT
主要语言C#
技术栈/模型agent,agentic,evals,evaluations,framework,net,red-teaming,testing,workflows
GitHub 星标★ 146
30天Star增速
HF 下载量
上线时间2026-01-02 00:00:00
最近更新2026-09-21 00:00:00
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-10
浏览次数3

使用教程

核心亮点

  • 填补 .NET 生态空白,提供与 RAGAS/DeepEval 对标的评测能力
  • 深度集成 MAF 和 Microsoft.Extensions.AI,上手顺滑
  • 覆盖工具调用、RAG、随机性、模型对比等关键评测维度

不足之处

  • 项目处于早期,文档和社区生态待观察
  • 仅支持 .NET 技术栈,跨语言场景受限

适用场景

  • .NET 开发者构建 Microsoft Agent Framework 应用时进行质量验证
  • 企业级 .NET 项目中需要对 RAG 系统进行指标化评测
  • 对 Agent 进行红队安全测试和模型对比选型

替代项目

RAGAS、PromptFoo、DeepEval

项目介绍

AgentEval 是评测安全领域的开源项目,由 AgentEvalHQ 开发,是 2026 年新上线的项目。

它收录于评测安全分类,该分类目前共有 458 个项目,GitHub 星标数为 146。

项目目前处于活跃维护状态,最近一次代码更新于 2026-09-21。MIT许可证,完全免费,无付费版本。从国内网络环境看,可直接访问。

它主要面向的使用场景是:.NET开发者构建MicrosoftAgentFramework应用时进行质量验证。同类可对比的替代方案包括 RAGAS、PromptFoo、DeepEval。

上一篇:agentevals

下一篇:openbench

同类项目推荐

akto 开源

给 AI 应用做安全体检,防提示注入和数据泄露

Akto is the fastest growing AI Security platform for your teams to secure AI agents,···

★ 1517 2026-08-20
XSafeClaw 开源

给 AI 智能体装上安全盾,自动红队测试找漏洞

Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University

★ 164 2026-08-10
deepteam 开源

自动模拟越狱攻击,提前测出 LLM 安全漏洞

DeepTeam is a framework to red team LLMs and AI agents.

★ 2937 2026-09-12