项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-10-07 · 当前星标 ★ 159
核心亮点
- 提供标准化数据集与统一指标,路由器之间可横向对比
- 自动化评测流程,减少手工跑实验和统计结果的重复劳动
- 带实时排行榜,结果公开可复现,便于跟踪社区进展
不足之处
- 项目处于早期,数据集和评测维度的覆盖范围可能有限
- 文档与社区生态尚在建设中,接入自定义路由器需要一定摸索
适用场景
- 研究团队对比不同 LLM 路由算法的效果与成本
- 企业在多模型 API 之间做路由选型时参考公开榜单
- 论文或技术报告需要可复现的路由评测基准
替代项目
RouteLLM、LiteLLM
同类项目推荐
chatbot-experiments
开源
收集 AI 越狱提示词,探索聊天机器人边界
A place to store jailbreaks, results of some prompts, or helpful utilities
uptrain
开源
给 LLM 应用打分找茬,快速定位并修复质量问题。
UpTrain is an open-source unified platform to evaluate and improve Generative AI app···
Prompt-Vault
开源
现成的编程提示词测试集,拿来就能给代码模型跑分
A collection of coding prompts and detailed project specifications designed for benc···
empirical
开源
用数据说话,系统化测试评估你的 LLM 应用
Test and evaluate LLMs and model configurations, across all the scenarios that matte···
LiveBench
开源
每月换新题,测出模型真实水平
LiveBench: A Challenging, Contamination-Free LLM Benchmark
trustmebro
开源
伪造工具输出,测出模型护栏会不会被骗
Bypass llm guardrails by confusing it with fabricated tool output.
InfiniteBench
开源
测出大模型在10万字长文本下的真实水平
Codes for the paper "∞Bench: Extending Long Context Evaluation Beyond 100K Tokens":···
dsh-jailbreak
开源
给 DSH 加可审计的提示改写层,量化拒答边界
dsh jailbreak - DeepSeek Assistant 破甲插件(DSH 破甲 / 越狱 / 破甲提示词):请求边界···
ADR
开源
给企业 AI 智能体装上安全监控与威胁拦截系统
ADR secures enterprise AI agents through observability, security benchmarking, and t···
