Awesome-Multimodal-Large-Language-Models

一榜在手,追踪多模态大模型最新进展

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 1135 🐛 待处理 119 👀 关注 281
GitHub ↗
GitHub 星标 ★ 18081
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,无在线服务,需自行部署,全部功能免费。

项目预览

Awesome-Multimodal-Large-Language-Models 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队BradyFU
定价模式🏷️完全免费
价格说明开源项目,无在线服务,需自行部署,全部功能免费。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
技术栈/模型chain-of-thought,in-context-learning,instruction-following,instruction-tuning,large-language-models,large-vision-language-model,large-vision-language-models,multi-modality,multimodal-chain-of-thought,multimodal-in-context-learning,multimodal-instruction-tuning,multimodal-large-language-models,visual-instruction-tuning
GitHub 星标★ 18081
上线时间2023-05-19 00:00:00
代码更新2026-10-29
仓库体积105.7 MB
本站数据更新2026-11-10
维护状态较活跃
收录时间2026-08-09
浏览次数8

项目介绍

这是一个持续更新的多模态大语言模型(MLLM)资源清单,汇总了领域内最新进展,包括论文、模型、数据集和工具。项目按模型架构、任务类型和应用场景分类整理,覆盖从视觉语言模型到音频、视频理解等方向,帮助研究者和开发者快速追踪前沿动态。它解决的是多模态领域信息分散、更新快、难以系统跟进的问题,核心能力在于结构化整理和实时更新,目前收录了数百项代表性工作,并附有论文链接和代码仓库。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 18081

使用教程

⚠ 本教程由 AI 依据该项目 README 整理;原始文档不完整,部分步骤为通用流程推断,实际安装请以项目官方文档为准。

难度:入门 约 5 分钟 部署方式:本地安装 4 步

⚠ 该项目 README 未提供完整安装说明,以下步骤为通用流程,请以官方文档为准。

环境要求

  • 可访问 GitHub 的网络环境
  • 本机已安装 Git(用于克隆仓库)
  • 任意文本编辑器或浏览器(用于阅读清单内容)

安装与启动步骤

  1. 1克隆资源清单仓库

    把整个清单仓库拉到本地,便于离线检索和全文搜索。仓库以文档为主,克隆体积很小。

    git clone https://github.com/BradyFU/Awesome-Multimodal-Large-Language-Models.git
  2. 2进入仓库目录

    切换到克隆下来的目录,里面主要是 README.md 等 Markdown 文档,没有可执行代码。

    cd Awesome-Multimodal-Large-Language-Models
  3. 3阅读主清单

    打开 README.md,按模型架构、任务类型等分类浏览收录的论文与模型,条目中附带 Paper 与 Project 链接。

  4. 4查看专题分支列表

    README 中 Surveys 等条目的 Project 链接指向 Benchmarks、Unified 分支,可切换分支查看对应专题清单。

    git checkout Benchmarks
    git checkout Unified

如何确认成功

本地目录中出现 README.md 等文档文件(可用 ls 查看),说明仓库已成功克隆。

常见问题

Q:这个项目需要安装依赖或配置环境吗?

A:不需要。它是持续更新的多模态大模型资源清单,仓库内容以 Markdown 文档和链接为主,没有需要安装运行的代码。

Q:怎么找到某篇论文对应的代码仓库?

A:在 README 的分类条目中,每条工作后面都附有 Paper 和 Project 链接,点击即可跳转到论文 PDF 或 GitHub 仓库。

Q:如何及时跟进最新收录内容?

A:在 GitHub 上 Star 或 Watch 该仓库,作者会持续更新;也可以定期 git pull 拉取本地最新清单。

Q:README 里的分支链接是什么?

A:部分条目(如 Surveys)的 Project 链接指向仓库的 Benchmarks、Unified 分支,切换到该分支可看到对应专题的完整整理。

注意事项

  • 本项目是资源清单而非可运行模型,不存在部署服务、端口或密钥配置。
  • 清单内容更新频繁,引用论文或模型前建议核对最新版本与提交时间。
  • README 中的链接多指向 arXiv 与 GitHub,需要可访问外网才能打开。

核心亮点

  • 分类细致,按模型架构、任务、模态等多维度组织,便于快速定位
  • 更新频繁,紧跟最新论文和模型发布,时效性强
  • 条目丰富,附论文和代码链接,可直接跳转使用

不足之处

  • 部分条目缺少深度解读,仅提供链接,需自行阅读原文
  • 文档/社区待观察

适用场景

  • 科研人员调研多模态领域最新模型和趋势
  • 工程师寻找可用的开源多模态模型和代码
  • 学生系统学习多模态大模型知识体系

替代项目

Awesome-Vision-Language-Models、Multimodal-Models-List、Awesome-Multimodal-Research

上一篇:OralGPT

下一篇:Awesome-LLM-in-Social-Science

同类项目推荐

awesome-open-llms 开源

每月一份清单,快速看清当下热门开源大模型

开源模型汇总,每月更新现在主流的开源模型。A monthly tracker for the latest and most ···

★ 146 2026-11-07
translations 开源

让浏览器离线翻译,隐私不泄露

The code, training pipeline, and models that power Firefox Translations

★ 375 2026-08-10
Eagle 开源

用数据策略打造更强的视觉语言模型,训练效果立竿见影

Eagle: Frontier Vision-Language Models with Data-Centric Strategies

★ 3828 2026-08-09
LLMPapers 开源

一站式追踪大模型前沿论文与工作

Papers & Works for large languange models (OpenAI GPT-4, Meta Llama, etc.).

★ 313 2026-08-09
Awesome-Colorful-LLM 开源

一页看尽LLM多领域前沿进展,快速定位所需资源。

Recent advancements propelled by large language models (LLMs), encompassing an array···

★ 132 2026-08-09
awesome-ai-repositories 开源

一站式找到AI工程师必备的开源项目清单

A curated list of open source repositories for AI Engineers

★ 140 2026-08-09
UForm 开源

小体积多模态模型,图文视频理解快数倍

Pocket-Sized Multimodal AI for content understanding and generation across multiling···

★ 1252 2026-11-06
laya 开源

在 Node.js 里本地跑决策模型,无需 Python

Run Laya, the open-source Jev-compatible System-1 decision model, from Node.js / Typ···

★ 1057 2026-10-19
Prompt4ReasoningPapers 开源

按图索骥,快速掌握大模型提示推理的论文地图

[ACL 2023] Reasoning with Language Model Prompting: A Survey

★ 1010 2026-08-09