项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 8823
使用教程
ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。
环境要求
- Python 3.10(作者实测环境)
- NVIDIA GPU(作者使用 RTX 3090 24GB,SFT 1 epoch 约 2 小时)
- CUDA 12.2(作者实测环境,Ubuntu 20.04)
- requirements.txt 中的 Python 依赖
安装与启动步骤
-
1克隆项目仓库
从 GitHub 拉取 minimind-v 源码到本地,后续所有命令都在该目录内执行。
git clone https://github.com/jingyaogong/minimind-v.git -
2进入项目目录
切换到刚克隆下来的项目根目录,确认能看到 requirements.txt 等文件。
cd minimind-v -
3确认软硬件环境
README 实测为 Ubuntu 20.04 + CUDA 12.2 + Python 3.10 + RTX 3090(24GB)。环境不符时可能无法训练。
-
4安装项目依赖
按 README 给出的命令安装依赖,并使用清华 PyPI 镜像加速下载。建议在虚拟环境中执行。
pip install -r requirements.txt -i https://pypi.tuna.tsinghua.edu.cn/simple -
5在线体验(可选)
不想本地部署时,可直接打开官方 ModelScope 在线体验页试用 MiniMind-V 的识图与对话能力。
-
6启动 WebUI(可选)
README 有“启动 WebUI(可选)”小节,但节选内容未给出具体启动命令,请以仓库最新文档为准。
-
7运行/续训 SFT 示例
README 给出的训练中断续训命令,--from_resume 1 表示从检查点继续,--epochs 4 指定训练轮数。
python train_sft_vlm.py --epochs 4 --from_resume 1
关键配置
| 配置项 | 必填 | 说明 | 示例 |
|---|---|---|---|
--from_weight | 否 | 指定基础权重名称,如 llm、pretrain_vlm、none 等 | pretrain_vlm |
--save_weight | 否 | 保存权重时使用的前缀名 | my_vlm |
--from_resume | 否 | 是否续训,0 从头开始,1 从检查点继续 | 1 |
--freeze_llm | 否 | 冻结策略:0 全参可训,1 proj+LLM 首尾层,2 仅训 proj | 1 |
--epochs | 否 | 训练轮数,README 示例中为 4 | 4 |
如何确认成功
README 未给出明确启动验证命令;可先访问 ModelScope 在线体验页确认效果,再本地跑推理或训练脚本观察日志。
常见问题
Q:需要什么级别的显卡才能跑?
A:README 实测使用 RTX 3090(24GB),SFT 阶段跑完 1 epoch 约 2 小时;模型最小仅 65M 参数,官方强调个人 GPU 也可快速推理甚至训练。
Q:训练中断了怎么继续?
A:用相同命令并加上 --from_resume 1 续训,例如 python train_sft_vlm.py --epochs 4 --from_resume 1。
Q:依赖下载太慢怎么办?
A:README 的安装命令已指定清华镜像源 -i https://pypi.tuna.tsinghua.edu.cn/simple,可直接复用。
Q:不想训练能直接用吗?
A:可以,README 提供了 ModelScope 在线体验地址,无需本地部署即可体验识图和对话。
注意事项
- 项目基于 Apache 2.0 协议开源,完全免费使用。
- “2 小时”指 SFT 阶段在单张 NVIDIA 3090 上跑完 1 epoch 的实测耗时,“3 块钱”指对应时段的 GPU 租用成本。
- README 节选未包含数据集下载、权重获取和 WebUI 启动的具体命令,请以仓库最新文档为准。
- MiniMind-V 是纯语言模型 MiniMind 的视觉能力拓展,多模态 Omni 版本见 MiniMind-O 仓库。
核心亮点
- 训练成本极低:仅需2小时和单张消费级GPU,即可完成65M参数VLM训练,大幅降低入门门槛
- 全流程开源:从数据构建到训练推理的完整代码和教程,便于复现和二次开发
- 模型轻量:65M参数适合边缘设备部署,推理速度快,资源占用小
不足之处
- 模型能力有限:65M参数规模远小于主流VLM,复杂视觉推理和知识问答效果受限
- 文档/社区待观察:项目处于成长早期,教程和社区支持可能不够完善
适用场景
- 教学与科研:用于高校或培训机构讲解多模态模型原理和训练流程
- 个人开发者快速原型:在有限算力下验证视觉语言结合的想法
- 边缘端轻量应用:部署在手机或嵌入式设备上实现基础图像理解
替代项目
LLaVA、MiniGPT-4、TinyLLaVA
下一篇:FinGPT
同类项目推荐
quick-start-guide-to-llms
开源
跟着官方代码,快速上手大模型实战
The Official Repo for "Quick Start Guide to Large Language Models"
Awesome_Multimodel_LLM
开源
一站式收藏多模态大模型资源,快速跟上最新进展
Awesome_Multimodel is a curated GitHub repository that provides a comprehensive coll···
Awesome-CVPR2026-CVPR2025-ICCV20···
开源
一键速览CVPR/ICCV/ECCV最新AIGC论文与代码
A Collection of Papers and Codes for CVPR2026/CVPR2025/ICCV2025/CVPR2024/ECCV2026/EC···
civitai
开源
逛模型、传模型、找灵感,一站式 AI 绘画社区。
A repository of models, textual inversions, and more
GLM-5
开源
让AI从写代码升级为自主干工程,直接交付可运行结果
GLM-5: From Vibe Coding to Agentic Engineering
Skywork
开源
开源中英双语大模型,数据权重全开放,快速训练部署
Skywork series models are pre-trained on 3.2TB of high-quality multilingual (mainly ···
awesome-llm
开源
一份清单,带你快速摸清大模型生态
Awesome series for Large Language Model(LLM)s
Kandinsky-2
开源
多语言文本生图,支持图像编辑修复,开箱即用
Kandinsky 2 — multilingual text2image latent diffusion model
DeepSeek-VL
开源
看懂图片并回答问题的开源多模态大模型
DeepSeek-VL: Towards Real-World Vision-Language Understanding
