RouterArena

统一基准评测 LLM 路由器，跑分上榜选型不踩坑

RouterArena 是一个面向 LLM 路由器的开源评测框架，解决当前路由方案各自为战、缺乏统一比较标准的问题。它提供标准化数据集、统一评测指标、自动化评测流程以及实时排行榜，让开发者能在同一基准下对比不同路由器的效果。核心能力包括：集成多种公开数据集与查询类型，定义准确率、成本、延迟等指标，自动跑通路由调用与结果统计，并把结果同步到在线榜单。对于研究多模型调度、成本优化、多智能体协作的团队，它把零散的评测脚本沉淀为可复现的公共基准，降低横向对比门槛。项目用 Python 实现，适合作为路由算法选型、论文实验和产品落地的参考依据。

开源 free 评测安全

访问官网 ↗ GitHub ↗ 文档 ↗

GitHub 星标 ★ 144

维护状态较活跃

是否开源是

定价模式 free

项目预览

项目数据

分类评测安全

开发团队RouteWorks

所属国家

官网地址https://routeworks.github.io

GitHubhttps://github.com/RouteWorks/RouterArena

定价模式free

价格说明开源免费框架，无付费服务

访问状态

是否开源是

开源协议Apache-2.0

主要语言Python

技术栈/模型arena,llm,llm-router,llm-routing,multi-agent,multi-agent-systems,router-benchmark,router-evaluation,router-leaderboard,routing

GitHub 星标★ 144

30天Star增速

HF 下载量

上线时间2025-10-05 00:00:00

代码更新—

仓库体积—

本站数据更新—

维护状态较活跃

中文支持

访问方式

移动端支持

综合评分

收录时间2026-10-07

浏览次数0

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

正在加载星标数据…

技术标签

使用教程

—

核心亮点

提供标准化数据集与统一指标，路由器之间可横向对比
自动化评测流程，减少手工跑实验和统计结果的重复劳动
带实时排行榜，结果公开可复现，便于跟踪社区进展

不足之处

项目处于早期，数据集和评测维度的覆盖范围可能有限
文档与社区生态尚在建设中，接入自定义路由器需要一定摸索

适用场景

研究团队对比不同 LLM 路由算法的效果与成本
企业在多模型 API 之间做路由选型时参考公开榜单
论文或技术报告需要可复现的路由评测基准

替代项目

RouteLLM、LiteLLM

项目介绍

RouterArena 是评测安全领域的开源项目，由 RouteWorks 开发，2025 年首次发布。

它收录于评测安全分类，该分类目前共有 498 个项目，GitHub 星标数为 144。

项目保持着较活跃的维护节奏，最近一次代码更新于 2026-09-29。开源免费框架，无付费服务。

它主要面向的使用场景是：研究团队对比不同LLM路由算法的效果与成本。同类可对比的替代方案包括 RouteLLM、LiteLLM。

上一篇：overmind

下一篇：augustus