ml-slowfast-llava

不训练也能做视频问答,双路抽帧直接跑出强基线

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 18 🐛 待处理 3 👀 关注 9
GitHub ↗
GitHub 星标 ★ 295
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源免费,需自行部署

项目预览

ml-slowfast-llava 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队apple-aiml-research
定价模式🏷️完全免费
价格说明开源免费,需自行部署
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议NOASSERTION
主要语言Python
技术栈/模型multimodal-large-language-models,video-question-answering
GitHub 星标★ 295
上线时间2024-08-26 00:00:00
代码更新2026-09-11
仓库体积386 KB
本站数据更新2026-11-04
维护状态维护中
收录时间2026-09-15
浏览次数1

项目介绍

SlowFast-LLaVA 是一个面向视频理解的多模态大语言模型方案,核心卖点是无需额外训练即可直接使用。它针对视频问答(Video QA)任务中现有模型普遍需要大规模视频指令微调、成本高且易过拟合的问题,提出双路径时空建模:Slow 路径以较低帧率抽取关键帧捕捉长程语义,Fast 路径以较高帧率采样密集帧捕捉快速运动细节,两者特征拼接后送入 LLM 生成答案。项目提供完整推理代码与配置,兼容主流视频问答基准,可直接加载开源权重运行,无需重新训练即可获得有竞争力的结果,为研究者提供低成本、可复现的视频 LLM 基线。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-09-15 · 当前星标 ★ 295

核心亮点

  • 完全免训练,直接复用现有图像 LLM 权重即可推理视频问答
  • Slow/Fast 双路径设计同时兼顾长程语义与快速动作细节
  • 代码结构清晰,配置化抽帧参数,便于在自有视频数据上快速验证

不足之处

  • 仅提供推理基线,缺少训练脚本与微调流程
  • 依赖外部图像 LLM 权重,需自行准备模型与显存环境

适用场景

  • 科研人员快速搭建视频问答基线做对比实验
  • 工程团队在无标注视频数据上验证多模态方案可行性
  • 教学场景演示视频 LLM 的免训练时空建模思路

替代项目

Video-LLaVA、LLaVA-NeXT-Video

上一篇:BitNet

下一篇:Dimple

同类项目推荐

InternVL 开源

开源接近GPT-4o的多模态对话模型,图像理解与对话一步到位。

[CVPR 2024 Oral] InternVL Family: A Pioneering Open-Source Alternative to GPT-4o. 接···

★ 10175 2026-08-09
eullm 开源

让大模型合规落地欧盟,垂直定制一步到位

Open-source platform for creating, distributing and running sovereign EU-compliant L···

★ 60 2026-08-09
Consistency_LLM 开源

让大模型并行吐字,推理速度翻倍

[ICML 2024] CLLMs: Consistency Large Language Models

★ 418 2026-08-09
WeMM-Embedding 开源

一套向量搞定图文互搜,多模态检索直接接入

WeMM-Embedding is a family of universal multimodal embedding models by the WeChat Vi···

★ 1805 2026-10-18
awesome-local-llm 开源

一站式找到本地跑大模型的所有工具和教程

A curated list of awesome platforms, tools, practices and resources that helps run L···

★ 3026 2026-08-09
Liquid 开源

用语言模型统一生成图像与文本,一步到位

(Accepted by IJCV) Liquid: Language Models are Scalable and Unified Multi-modal Gene···

★ 639 2026-08-09
mlx-lm 开源

在 Mac 上本地跑大模型,不买显卡也能流畅推理微调

Run LLMs with MLX

★ 7545 2026-09-16
LLaMA-Mesh 开源

用大模型直接生成 3D 网格,告别复杂建模流程

Unifying 3D Mesh Generation with Language Models

★ 1173 2026-08-09
Ovis-U1 开源

一个模型搞定看图、画图和改图

An unified model that seamlessly integrates multimodal understanding, text-to-image ···

★ 454 2026-08-09