GLM-V

一套模型搞定看图、看视频和视觉推理

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 191 🐛 待处理 15 👀 关注 15
GitHub ↗
GitHub 星标 ★ 2406
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源模型权重,免费使用

项目预览

GLM-V 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队zai-org
定价模式🏷️完全免费
价格说明开源模型权重,免费使用
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型image2text,reasoning,video-understanding,vlm
GitHub 星标★ 2406
上线时间2025-06-28 00:00:00
代码更新2026-10-23
仓库体积34.5 MB
本站数据更新2026-11-01
维护状态较活跃
收录时间2026-11-01
浏览次数0

项目介绍

GLM-V 是智谱开源的多模态视觉语言模型系列,涵盖 GLM-4.6V、4.5V 与 4.1V-Thinking 等版本,主打可扩展强化学习驱动的通用多模态推理。项目解决图文理解、视频理解与复杂视觉推理任务中模型能力割裂的问题,让同一套模型既能做图像描述、文档与图表解析,也能处理长视频内容理解与多步推理。核心能力包括:图像到文本的细粒度理解、视频时序理解、带思维链的视觉推理,以及通过强化学习提升推理深度与稳定性。仓库提供模型权重、推理代码与使用示例,基于 Python 实现,适合研究者与工程团队直接加载评测或二次微调,也可作为多模态应用(如视觉问答、内容审核辅助、教育题目解析)的底座模型。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-11-01 · 当前星标 ★ 2406

使用教程

⚠ 本教程由 AI 依据该项目 README 整理;原始文档不完整,部分步骤为通用流程推断,实际安装请以项目官方文档为准。

难度:高级 约 30 分钟 部署方式:模型权重 6 步

⚠ 该项目 README 未提供完整安装说明,以下步骤为通用流程,请以官方文档为准。

环境要求

  • Python 环境(项目为 Python 实现)
  • 可访问 GitHub 的 git 客户端
  • 足够的磁盘空间存放模型权重
  • 建议配备 GPU 用于多模态推理(README 未明确说明,属通用建议)

安装与启动步骤

  1. 1克隆代码仓库

    把 GLM-V 仓库拉到本地并进入目录,后续的推理示例代码都在这个目录内。

    git clone https://github.com/zai-org/GLM-V.git
    cd GLM-V
  2. 2创建虚拟环境

    用独立虚拟环境隔离依赖,避免与系统 Python 包冲突,再激活环境。

    python -m venv venv
    source venv/bin/activate
  3. 3阅读中文说明

    仓库根目录提供 README_zh.md,先看中文版说明与目录结构,了解各版本差异。

  4. 4确认模型版本

    仓库包含 GLM-4.6V、GLM-4.5V、GLM-4.1V 三个系列,先确定要使用哪个版本再做后续操作。

  5. 5查看已知问题

    README 中有 Known Issues 与 Fixed and Remaining Issue 段落,动手前先确认当前限制。

  6. 6查阅推理示例

    README 节选未给出安装命令与权重下载地址,按仓库内推理代码与实际文件说明为准。

如何确认成功

README 节选未提供启动命令,暂无标准验证方式;可先确认仓库克隆成功、目录内存在推理代码与说明文件。

常见问题

Q:如何安装依赖?

A:README 节选未给出依赖安装命令,请以仓库实际提供的说明文件为准,不要照搬未经确认的包名。

Q:模型权重从哪里下载?

A:节选内容未提供权重下载地址,请查看仓库内 Model Overview 章节和相关说明获取官方渠道。

Q:三个版本怎么选?

A:GLM-4.6V 为较新版本,GLM-4.5V 与 GLM-4.1V-Thinking 侧重不同,可按任务需求与算力选择。

Q:必须自己有 GPU 吗?

A:本地加载权重做推理通常需要较高显存;如只想调用能力,README 提到可通过官方 API 平台使用。

注意事项

  • README 节选缺少安装与推理命令,本教程只覆盖可确认的准备动作,具体命令以仓库正文为准。
  • 模型权重文件体积较大,下载前先预留磁盘空间与显存。
  • README 中的社区、博客与外链仅作资料参考,不影响本地部署步骤。

核心亮点

  • 同一系列覆盖图像理解、视频理解与思维链推理,任务面广
  • 以可扩展强化学习提升多模态推理能力,思路与工程实现完整
  • 提供多版本尺寸选择,便于按算力与精度需求取舍

不足之处

  • 多模态大模型对显存和算力要求高,普通设备难以本地跑满血版本
  • 强化学习训练细节与复现成本较高,普通用户难以完整复现
  • 文档与社区生态仍在成长,周边工具链不如头部模型完善

适用场景

  • 图文问答与文档、图表内容解析
  • 长视频内容理解与关键信息抽取
  • 教育场景的题目图像解析与分步推理

替代项目

Qwen2.5-VL、InternVL、LLaVA

上一篇:LucaOne

下一篇:没有了!

同类项目推荐

pytorch-stable-diffusion 开源

手写 Stable Diffusion 源码,从论文到图像生成一步到位

Stable Diffusion implemented from scratch in PyTorch

★ 1086 2026-08-09
BeyondCLIP 开源

多模态检索实战手册,助你选型不踩坑

Not a neutral survey — a field manual for engineers who build, train, and ship mult···

★ 83 2026-08-09
Scientific-LLM-Survey 开源

一文看懂生物化学领域的大模型研究全景

Scientific Large Language Models: A Survey on Biological & Chemical Domains

★ 361 2026-08-09
keras-hub 开源

几行代码加载预训练模型,跨后端微调推理一步到位

Pretrained model hub for Keras 3.

★ 996 2026-09-16
Liquid 开源

用语言模型统一生成图像与文本,一步到位

(Accepted by IJCV) Liquid: Language Models are Scalable and Unified Multi-modal Gene···

★ 639 2026-08-09
llm.pdf 开源

打开 PDF 就能和 AI 聊天,不用装任何环境

Run LLMs inside a PDF file.

★ 871 2026-09-22
unilm 开源

一个模型搞定理解和生成,预训练即插即用

Large-scale Self-supervised Pre-training Across Tasks, Languages, and Modalities

★ 22237 2026-08-09
Valley 开源

一个模型同时看懂文字、图片、视频和音频

Valley is a cutting-edge multimodal large model designed to handle a variety of task···

★ 298 2026-10-07