unitxt 是评测安全领域的开源项目，由 IBM 开发，2023 年首次发布。
它收录于评测安全分类，该分类目前共有 458 个项目，GitHub 星标数为 216。
项目目前处于活跃维护状态，最近一次代码更新于 2026-09-15。开源库，Apache-2.0 许可证，完全免费，无付费版本。
它主要面向的使用场景是：企业级AI模型上线前的性能基准测试。同类可对比的替代方案包括 lm-evaluation-harness、OpenCompass、DeepEval。
项目数据
分类基础设施
开发团队IBM
所属国家
定价模式free
价格说明开源库，Apache-2.0 许可证，完全免费，无付费版本。
访问状态
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型ai,data,datasets,evaluation,evaluation-metrics,llm,mlops,nlp,nlp-library,python,vision
GitHub 星标★ 216
30天Star增速
HF 下载量
上线时间2023-06-15 00:00:00
最近更新2026-09-15 00:00:00
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数3
使用教程
核心亮点
- 提供大规模预置数据集和指标目录，覆盖多种评估场景
- 模块化设计，支持灵活组合任务、数据和指标，易于扩展
- 标准化评估流程，提升结果的可复现性和可比性
不足之处
- 早期项目，文档和社区生态尚待完善
- 与主流框架（如 HuggingFace）的集成深度待观察
适用场景
- 企业级 AI 模型上线前的性能基准测试
- 研究团队进行多模型对比评估
- 需要标准化评估流程的持续集成/持续部署（CI/CD）环境
替代项目
lm-evaluation-harness、OpenCompass、DeepEval
项目介绍
上一篇：Veritensor
下一篇：frouros
同类项目推荐
akto
开源
给 AI 应用做安全体检，防提示注入和数据泄露
Akto is the fastest growing AI Security platform for your teams to secure AI agents,···
XSafeClaw
开源
给 AI 智能体装上安全盾，自动红队测试找漏洞
Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University
deepteam
开源
自动模拟越狱攻击，提前测出 LLM 安全漏洞
DeepTeam is a framework to red team LLMs and AI agents.
Tracely-ai
开源
把生产事故变成回归测试，合并前自动拦截 AI 故障
Trace-native CI/CD for AI agents — production failures become regression tests that···