llamator 是评测安全领域的开源项目，由 LLAMATOR-Core 开发，2024 年首次发布。
它收录于评测安全分类，该分类目前共有 466 个项目，GitHub 星标数为 223。
项目已超过三个月没有代码更新，维护节奏明显放缓，最近一次代码更新于 2026-09-22。本地部署，完全免费。
它主要面向的使用场景是：LLM应用上线前的安全评估。同类可对比的替代方案包括 garak、PyRIT、TextAttack。
llamator
给聊天机器人找茬，提前揪出安全漏洞
llamator 是一个用于测试聊天机器人和生成式 AI 系统的红队（Red Teaming）Python 框架。它主要解决 LLM 应用在安全性和可靠性方面的测试难题，帮助开发者主动发现模型可能存在的提示注入、越狱、有害内容生成等漏洞。核心能力包括：提供一套结构化的测试用例库，覆盖常见攻击模式；支持自定义测试场景，灵活适配不同业务需求；能够自动化执行测试并生成报告，方便集成到 CI/CD 流程中。通过模拟恶意或边缘输入，llamator 让开发者在部署前就能识别和修复潜在风险，从而提升 AI 应用的安全基线。
开源
free
搜索知识
GitHub 星标
★ 223
维护状态
低维护
是否开源
是
定价模式
free
项目数据
分类搜索知识
开发团队LLAMATOR-Core
所属国家
定价模式free
价格说明开源框架，本地部署，完全免费
访问状态
是否开源是
开源协议NOASSERTION
主要语言Python
技术栈/模型agent,ai,ai-security,attack,hallucinations,jailbreak,llm,llm-read-team,llm-security,llm-testing,misinformation,nlp,owasp,python,rag,rag-evaluation,red-team,red-team-tools,security-tools,vulnerability
GitHub 星标★ 223
30天Star增速
HF 下载量
上线时间2024-09-05 00:00:00
最近更新2026-09-22 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数5
使用教程
核心亮点
- 内置多种红队测试用例，覆盖提示注入、越狱等常见攻击
- 支持自定义测试场景，可针对业务定制安全测试
- 自动化测试并输出报告，便于集成到开发流程
不足之处
- 项目早期，文档和社区生态尚不完善
- 功能相对基础，高级攻击模拟能力有限
适用场景
- LLM 应用上线前的安全评估
- 持续集成中自动执行安全回归测试
- 安全团队对聊天机器人进行渗透测试
替代项目
garak、PyRIT、TextAttack
项目介绍
上一篇：confabulations
下一篇：XRAG
同类项目推荐
akto
开源
给 AI 应用做安全体检，防提示注入和数据泄露
Akto is the fastest growing AI Security platform for your teams to secure AI agents,···
XSafeClaw
开源
给 AI 智能体装上安全盾，自动红队测试找漏洞
Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University
fast-llm-security-guardrails
开源
给 AI Agent 加一道快速安全闸门，防提示注入和隐私泄露
The fastest Trust Layer for AI Agents
deepteam
开源
自动模拟越狱攻击，提前测出 LLM 安全漏洞
DeepTeam is a framework to red team LLMs and AI agents.