LLM-Agent-Evaluation-Survey

一库收齐智能体评测论文,快速摸清评测方法

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 评测安全 🍴 复刻 20 👀 关注 3
GitHub ↗
GitHub 星标 ★ 114
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费,无商业定价

项目预览

LLM-Agent-Evaluation-Survey 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类评测安全
开发团队Asaf-Yehudai
定价模式🏷️完全免费
价格说明开源免费,无商业定价
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
GitHub 星标★ 114
上线时间2025-04-28 00:00:00
代码更新2026-10-21
仓库体积39.5 MB
本站数据更新2026-10-23
维护状态活跃
收录时间2026-10-23
浏览次数0

项目介绍

这是一个聚焦大语言模型智能体评测的论文与资源清单型开源项目,汇总了与 LLM-based agent 评测相关的前沿论文,帮助研究者和工程师快速定位评测方法、基准与指标。它解决的是智能体评测领域信息分散、论文繁多难以系统梳理的问题,核心能力是分类整理相关文献,形成可检索的评测知识索引。项目本身不提供评测框架或可运行代码,更偏向综述与导航性质,适合作为入门调研或跟踪领域进展的起点。由于星标较少、处于早期阶段,内容更新和维护节奏需持续关注。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-10-23 · 当前星标 ★ 114

核心亮点

  • 按主题汇总 LLM 智能体评测相关论文,便于系统调研
  • 聚焦评测这一细分方向,比通用 awesome 列表更垂直
  • 适合作为论文检索入口,降低领域入门的信息筛选成本

不足之处

  • 仅为论文清单,不含可运行的评测代码或工具
  • 项目早期、星标少,更新频率与内容完整性待观察

适用场景

  • 研究生调研智能体评测方向时快速找论文
  • 团队设计智能体评测方案前做文献综述
  • 跟踪 LLM Agent 评测领域最新进展

替代项目

awesome-llm-agents、AgentBench

上一篇:matharena

下一篇:genai-bench

同类项目推荐

InfiniteBench 开源

测出大模型在10万字长文本下的真实水平

Codes for the paper "∞Bench: Extending Long Context Evaluation Beyond 100K Tokens":···

★ 393 2026-08-09
FuzzyAI 开源

自动给 LLM 做安全体检,找出越狱漏洞

A powerful tool for automated LLM fuzzing. It is designed to help developers and sec···

★ 1588 2026-08-09
sec-code-bench 开源

测测大模型写的代码安不安全

SecCodeBench is a benchmark suite focusing on evaluating the security of code genera···

★ 135 2026-10-14
CS-Eval 开源

给网络安全大模型打分,快速找出安全能力短板

CS-Eval is a comprehensive evaluation suite for fundamental cybersecurity models or ···

★ 67 2026-08-09
Awesome-KV-Cache-Optimization 开源

一页看懂 KV Cache 优化全景,快速选对推理加速方案

[ACL 2026] Towards Efficient Large Language Model Serving: A Survey on System-Aware ···

★ 422 2026-09-25
xFinder 开源

用AI自动评估AI,让模型评测更可靠、更省力

[ICLR 2025] xFinder: Large Language Models as Automated Evaluators for Reliable Eval···

★ 178 2026-08-09
HacxGPT-Jailbreak-prompts 开源

一键解锁 AI 模型隐藏能力,突破限制自由对话

HacxGPT Jailbreak : Unlock the full potential of top AI models like ChatGPT, LLaMA, ···

★ 220 2026-08-09
mcp-observatory 开源

在智能体接入前,自动给 MCP 服务器做安全体检

Free, MIT-licensed MCP security testing from ClearFrame. Scan, audit, compare, and r···

★ 136 2026-08-09
aws-bench 开源

给AI智能体在真实AWS云上打分的基准测试

aws-bench measures how well AI agents and model combinations perform on real AWS wor···

★ 136 2026-08-09