search-arena

量化分析搜索增强大模型,看清能力边界

Search Arena 是一个用于分析搜索增强型大语言模型(LLM)的开源工具,源自 ICLR 2026 论文的官方代码。它解决的核心问题是:当 LLM 接入搜索引擎后,其行为、能力和局限性如何变化。项目提供了一套系统化的评估框架,支持对模型在搜索增强场景下的表现进行量化分析和对比。核心能力包括构建搜索增强的交互环境、设计评估任务、收集和分析模型响应,以及可视化结果。它帮助研究者和开发者深入理解搜索增强 LLM 的推理过程、信息利用效率和潜在偏差,从而优化模型设计或应用策略。项目采用 Jupyter Notebook 形式,便于交互式探索和结果复现。

开源 free 开源模型
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 59
维护状态 低维护
是否开源
定价模式 free

项目数据

分类开源模型
开发团队lmarena
所属国家
官网地址
定价模式free
价格说明开源代码,本地部署,完全免费
访问状态
是否开源
开源协议
主要语言Jupyter Notebook
技术栈/模型chatbot-arena,information-retrieval,large-language-models,search-augmented-generation
GitHub 星标★ 59
30天Star增速
HF 下载量
上线时间2025-06-04 00:00:00
最近更新2026-09-15 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数1

使用教程

核心亮点

  • 源自 ICLR 2026 论文,评估方法有学术背书
  • 提供系统化分析框架,可复现研究结论
  • Notebook 形式,上手门槛低,便于交互探索

不足之处

  • 早期项目,文档和社区支持待观察
  • 依赖特定模型和搜索接口,环境配置可能复杂

适用场景

  • 研究搜索增强 LLM 的推理机制
  • 对比不同模型在搜索场景下的表现
  • 优化搜索增强应用的提示词或检索策略

替代项目

LangChain、LlamaIndex、RAGAS

项目介绍

search-arena 是评测安全领域的开源项目,由 lmarena 开发,2025 年首次发布。

它收录于评测安全分类,该分类目前共有 458 个项目,GitHub 星标数为 59。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-15。开源代码,本地部署,完全免费。

它主要面向的使用场景是:研究搜索增强LLM的推理机制。同类可对比的替代方案包括 LangChain、LlamaIndex、RAGAS。

同类项目推荐

akto 开源

给 AI 应用做安全体检,防提示注入和数据泄露

Akto is the fastest growing AI Security platform for your teams to secure AI agents,···

★ 1517 2026-08-20
XSafeClaw 开源

给 AI 智能体装上安全盾,自动红队测试找漏洞

Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University

★ 164 2026-08-10
deepteam 开源

自动模拟越狱攻击,提前测出 LLM 安全漏洞

DeepTeam is a framework to red team LLMs and AI agents.

★ 2937 2026-09-12
Tracely-ai 开源

把生产事故变成回归测试,合并前自动拦截 AI 故障

Trace-native CI/CD for AI agents — production failures become regression tests that···

★ 1362 2026-08-24