AgentEval

用 .NET 原生工具,给 AI Agent 做全面体检和红队测试。

开源 🏷️完全免费 ✅ 目前可打开 评测安全 🍴 复刻 16 🐛 待处理 2 👀 关注 3
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 158
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,无付费版本。

项目预览

AgentEval 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类评测安全
开发团队AgentEvalHQ
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,无付费版本。
访问状态✅ 目前可打开
是否开源是
开源协议MIT
主要语言C#
技术栈/模型agent,agentic,evals,evaluations,framework,net,red-teaming,testing,workflows
GitHub 星标★ 158
上线时间2026-01-02 00:00:00
代码更新2026-11-08
仓库体积36.4 MB
本站数据更新2026-11-09
维护状态活跃
收录时间2026-08-10
浏览次数4

项目介绍

AgentEval 是一个面向 .NET 生态的 AI Agent 评测工具包,旨在为 .NET 开发者提供与 Python 生态中 RAGAS、PromptFoo、DeepEval 等工具对标的能力。它主要解决 .NET 环境下 Agent 应用缺乏系统性评测手段的问题,覆盖工具调用验证、RAG 质量指标、随机性评估、模型对比等核心场景。AgentEval 深度集成 Microsoft Agent Framework (MAF) 和 Microsoft.Extensions.AI,提供从单元测试到红队演练的完整评测工作流,帮助开发者量化 Agent 的可靠性、安全性和性能。项目处于早期阶段,但定位清晰,直接填补了 .NET 在 Agent 评测领域的空白。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-10 · 当前星标 ★ 158

核心亮点

  • 填补 .NET 生态空白,提供与 RAGAS/DeepEval 对标的评测能力
  • 深度集成 MAF 和 Microsoft.Extensions.AI,上手顺滑
  • 覆盖工具调用、RAG、随机性、模型对比等关键评测维度

不足之处

  • 项目处于早期,文档和社区生态待观察
  • 仅支持 .NET 技术栈,跨语言场景受限

适用场景

  • .NET 开发者构建 Microsoft Agent Framework 应用时进行质量验证
  • 企业级 .NET 项目中需要对 RAG 系统进行指标化评测
  • 对 Agent 进行红队安全测试和模型对比选型

替代项目

RAGAS、PromptFoo、DeepEval

上一篇:agentevals

下一篇:openbench

同类项目推荐

deepchecks 开源

给 ML 模型和数据做全面体检,从研究到生产持续验证

Deepchecks: Tests for Continuous Validation of ML Models & Data. Deepchecks is a hol···

★ 4069 2026-08-09
www-project-agent-memory-guard 开源

给AI智能体记忆加把锁,防投毒防操控

Runtime defense against memory poisoning in AI agents (OWASP ASI06). Drop-in for Lan···

★ 200 2026-08-09
dialog-eval 开源

17个指标一键评估你的对话模型,告别人工打分。

Evaluate your dialog model with 17 metrics! (see paper)

★ 97 2026-08-09
RAGElo 开源

用 Elo 对战排名,快速选出最强 RAG 智能体

RAGElo is a set of tools that helps you selecting the best RAG-based LLM agents by u···

★ 133 2026-10-02
Tracely 开源

把生产事故变成 CI 回归测试,自动拦截坏 PR

Trace-native CI/CD for AI agents — production failures become regression tests that···

★ 1311 2026-08-09
LLMeBench 开源

一键跑分,快速对比各大语言模型效果

Benchmarking Large Language Models

★ 108 2026-08-09
llm-eval 开源

一站式跑分,快速对比大模型与 RAG 效果

大语言模型评估平台,支持多种评估基准、自定义数据集和性能测试。支持基于自定义数据集的···

★ 100 2026-08-09
HacxGPT-Jailbreak-prompts 开源

一键解锁 AI 模型隐藏能力,突破限制自由对话

HacxGPT Jailbreak : Unlock the full potential of top AI models like ChatGPT, LLaMA, ···

★ 227 2026-08-09
Deco 开源

让多模态模型少说瞎话,动态纠错解码即插即用

[ICLR 2025] MLLM can see? Dynamic Correction Decoding for Hallucination Mitigation

★ 150 2026-08-09