search-arena

量化分析搜索增强大模型,看清能力边界

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 8 🐛 待处理 4 👀 关注 3
GitHub ↗
GitHub 星标 ★ 61
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源代码,本地部署,完全免费

项目预览

search-arena 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队Arena-OSS
定价模式🏷️完全免费
价格说明开源代码,本地部署,完全免费
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Jupyter Notebook
技术栈/模型chatbot-arena,information-retrieval,large-language-models,search-augmented-generation
GitHub 星标★ 61
上线时间2025-06-04 00:00:00
代码更新2026-02-23
仓库体积10.0 MB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数2

项目介绍

Search Arena 是一个用于分析搜索增强型大语言模型(LLM)的开源工具,源自 ICLR 2026 论文的官方代码。它解决的核心问题是:当 LLM 接入搜索引擎后,其行为、能力和局限性如何变化。项目提供了一套系统化的评估框架,支持对模型在搜索增强场景下的表现进行量化分析和对比。核心能力包括构建搜索增强的交互环境、设计评估任务、收集和分析模型响应,以及可视化结果。它帮助研究者和开发者深入理解搜索增强 LLM 的推理过程、信息利用效率和潜在偏差,从而优化模型设计或应用策略。项目采用 Jupyter Notebook 形式,便于交互式探索和结果复现。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 61

核心亮点

  • 源自 ICLR 2026 论文,评估方法有学术背书
  • 提供系统化分析框架,可复现研究结论
  • Notebook 形式,上手门槛低,便于交互探索

不足之处

  • 早期项目,文档和社区支持待观察
  • 依赖特定模型和搜索接口,环境配置可能复杂

适用场景

  • 研究搜索增强 LLM 的推理机制
  • 对比不同模型在搜索场景下的表现
  • 优化搜索增强应用的提示词或检索策略

替代项目

LangChain、LlamaIndex、RAGAS

同类项目推荐

FuzzyAI 开源

自动给 LLM 做安全体检,找出越狱漏洞

A powerful tool for automated LLM fuzzing. It is designed to help developers and sec···

★ 1602 2026-08-09
SelfAware 开源

测出模型不知道自己不知道什么,减少胡编乱造

Do Large Language Models Know What They Don’t Know?

★ 107 2026-08-09
judgeval 开源

给 AI Agent 装上持续评测仪表盘,让改进有据可依

The Continuous-Improvement Stack for Agents. Our environment data and evals power ag···

★ 1073 2026-08-10
awesome-gpt-6-astra 开源

一份清单,带你安全玩转GPT-6 Astra的实战用例与提示词。

Evidence-backed use cases, prompts, integrations, evaluations, and safety notes for ···

★ 15 2026-09-07
Awesome-Video-MLLMs 开源

一站式追踪视频多模态大模型前沿,快速找到所需模型和基准。

:fire: :fire: :fire: Awesome MLLMs/Benchmarks for Short/Long/Streaming Video Underst···

★ 75 2026-08-09
AgentCompass 开源

一套框架统一跑各家智能体评测,结果可横向对比

[EMNLP 2026] AgentCompass is an extensible open-source evaluation infrastructure for···

★ 190 2026-10-23
continuous-eval 开源

让 LLM 应用效果可量化,用数据驱动迭代优化

Data-Driven Evaluation for LLM-Powered Applications

★ 519 2026-08-09
pii-guardrail-browser-extension 开源

粘贴前自动抹掉敏感信息,放心用 AI 对话

Privacy Guardrail is a local-first Chrome extension that detects and anonymizes PII ···

★ 103 2026-11-07