terminal-bench

在真实终端里跑任务,量出 agent 到底行不行

开源 unknown 评测安全
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 878
维护状态 活跃
是否开源 是
定价模式 unknown

项目预览

项目数据

分类评测安全
开发团队harbor-framework
所属国家
官网地址https://tbench.ai
定价模式unknown
价格说明定价信息待确认
访问状态
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型
GitHub 星标★ 878
30天Star增速
HF 下载量
上线时间2026-01-25 00:00:00
代码更新—
仓库体积—
本站数据更新—
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-10-13
浏览次数0

项目介绍

terminal-bench 是一个面向终端智能体(agent)的评测基准,用来衡量 AI 在真实命令行环境中的任务完成能力。它提供标准化的任务集与执行框架,让开发者能在统一环境下测试不同模型或 agent 的表现,避免各家自说自话。核心能力包括:定义可复现的终端任务、自动运行 agent 并记录结果、对比不同方案的能力边界。项目还强调“测量并随 agent 工作前沿演进”,意味着任务集会随 agent 能力提升而更新,保持评测的挑战性。对于研究者和工程团队,它解决了“如何客观比较终端 agent 好坏”的问题,适合用来做模型选型、能力回归测试和迭代方向验证。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

正在加载星标数据…

技术标签

使用教程

—

核心亮点

  • 提供标准化终端任务集,评测结果可复现、可横向对比
  • 任务随 agent 能力前沿演进,避免基准很快饱和失效
  • Python 实现,易于接入现有 agent 框架和 CI 流程

不足之处

  • 早期项目,任务覆盖面和难度分层可能还在完善
  • 社区生态和第三方贡献规模相对有限,文档待观察

适用场景

  • 模型选型时对比不同 LLM 在终端任务上的完成率
  • agent 迭代后跑回归测试,防止能力退化
  • 研究团队发布新终端 agent 时用统一基准做验证

替代项目

SWE-bench、WebArena

同类项目推荐

hanshuang-codex 开源

桌面端批量测大模型越狱提示,一键跑实验看边界

针对GPT 6.0,workbuddyV4.1flash的破甲实验项目

★ 1110 2026-09-28
akto 开源

给 AI 应用做安全体检,防提示注入和数据泄露

Akto is the fastest growing AI Security platform for your teams to secure AI agents,···

★ 1528 2026-08-20
XSafeClaw 开源

给 AI 智能体装上安全盾,自动红队测试找漏洞

Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University

★ 164 2026-08-10
deepteam 开源

自动模拟越狱攻击,提前测出 LLM 安全漏洞

DeepTeam is a framework to red team LLMs and AI agents.

★ 3007 2026-09-12