agent-skills-eval

跑一遍测试，就知道你的 AI 技能行不行

agent-skills-eval 是一个用于测试 AI 智能体技能（Agent Skills）的测试运行器，灵感来自 agentskills.io。它解决的核心问题是：当开发者基于 OpenAI 兼容接口构建智能体技能时，缺乏一套标准化的评测工具来验证技能是否按预期工作。该项目提供 CLI 工具，通过 YAML 定义测试用例，以 JSONL 格式输出评测结果，支持与主流 LLM 接口对接。其核心能力包括：定义多步骤测试场景、自动执行智能体调用、对输出进行断言校验、生成结构化报告。它帮助开发者在开发周期中快速回归测试智能体行为，确保技能更新不破坏已有功能，从而提升智能体开发的可靠性和迭代效率。项目采用 TypeScript 编写，设计简洁，易于集成到 CI/CD 流程中。