best-llm-finder-pipeline

三套流水线,自动帮你挑出最合适的LLM

这是一个用于寻找最佳大语言模型(LLM)的自动化流水线项目,基于Agentic RAG、多智能体系统和视觉推理三种技术路线构建。它解决的是在众多LLM中如何高效、客观地筛选出最适合特定任务或场景的模型的问题。项目通过Jupyter Notebook实现,提供了三个可执行的流水线:Agentic RAG利用检索增强生成技术,结合智能体自主决策,从文档或知识库中检索并评估模型;多智能体系统通过多个智能体协作,从不同维度(如性能、成本、速度)对模型进行综合打分;视觉推理则针对多模态模型,通过图像理解任务测试其视觉能力。核心能力包括自动化评估流程、多维度对比分析以及可扩展的评估框架,帮助开发者或研究者快速定位满足需求的LLM,减少人工试错成本。

开源 free 搜索知识
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 143
维护状态 低维护
是否开源
定价模式 free

项目数据

分类搜索知识
开发团队FareedKhan-dev
所属国家
官网地址
定价模式free
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态
是否开源
开源协议MIT
主要语言Jupyter Notebook
技术栈/模型artificial-intelligence,huggingface,llm,multi-agent-systems,openai,pipeline,rag,vision
GitHub 星标★ 143
30天Star增速
HF 下载量
上线时间2025-08-20 00:00:00
最近更新2026-09-16 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数6

使用教程

核心亮点

  • 提供三种独立评估流水线(RAG、多智能体、视觉推理),覆盖不同场景需求
  • 自动化评估流程,减少人工对比和试错成本
  • 基于Notebook实现,易于阅读、修改和扩展

不足之处

  • 项目处于早期阶段(140星),文档和社区支持有待完善
  • 评估指标和标准可能不够全面,需用户自行调整

适用场景

  • 开发者需要从多个LLM中快速筛选出适合特定NLP任务的模型
  • 团队在选型时希望结合多维度评估结果进行决策
  • 研究者需要自动化测试多模态模型的视觉理解能力

替代项目

LMSYS Chatbot Arena、Open LLM Leaderboard、LangChain Benchmarks

项目介绍

best-llm-finder-pipeline 是开发框架领域的开源项目,由 FareedKhan-dev 开发,2025 年首次发布。

它收录于开发框架分类,该分类目前共有 795 个项目,GitHub 星标数为 143。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-16。MIT许可证,完全免费,可自行部署使用。

它主要面向的使用场景是:开发者需要从多个LLM中快速筛选出适合特定NLP任务的模型。同类可对比的替代方案包括 LMSYS Chatbot Arena、Open LLM Leaderboard、LangChain Benchmarks。

上一篇:Text2Sql.Net

下一篇:llm

同类项目推荐

langchain 开源

组装 AI 应用的乐高积木,从想法到上线不换工具

The agent engineering platform.

★ 146874 2026-08-09
transformers 开源

全球最大的模型仓库全家桶,想用的模型一把抓

Transformers: the model-definition framework for state-of-the-art machine learning m···

★ 166529 2026-08-09
pi 开源

一套 TypeScript 工具包,快速搭出能写代码的 AI agent

AI agent toolkit: unified LLM API, agent loop, TUI, coding agent CLI

★ 108504 2026-09-12