langvio

用自然语言问视频,YOLO 检测加 LLM 直接给答案

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 计算机视觉 🍴 复刻 60 🐛 待处理 2 👀 关注 8
GitHub ↗
GitHub 星标 ★ 425
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费使用

项目预览

langvio 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类计算机视觉
开发团队MugheesMehdi07
定价模式🏷️完全免费
价格说明开源免费使用
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议NOASSERTION
主要语言Python
GitHub 星标★ 425
上线时间2025-04-01 00:00:00
代码更新2026-10-23
仓库体积17.0 MB
本站数据更新2026-10-26
维护状态活跃
收录时间2026-10-26
浏览次数0

项目介绍

langvio 是一个面向计算机视觉的 Python AI 库,目标是把大语言模型(LLM)与 YOLO 等视频处理框架连接起来,让开发者用自然语言驱动视频理解流程。它解决的核心问题是:视觉模型(如目标检测)输出的是结构化坐标与类别,而 LLM 擅长语义推理,两者之间缺少统一的编排层。langvio 提供中间层,把视频帧检测结果转成 LLM 可消费的上下文,再结合用户提问完成对象识别、场景描述与上下文分析。核心能力包括:对接 YOLO 系列检测器、组织视频逐帧或抽帧处理管线、将检测结果与自然语言查询融合、输出可读的分析结论。适合快速搭建「视频问答」「监控片段语义检索」「检测结果自动解读」等原型,降低视觉与语言模型拼接的工程成本。项目处于早期阶段,星标约 425,接口和文档仍在演进,适合实验性验证而非生产级依赖。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-10-26 · 当前星标 ★ 425

核心亮点

  • 把 YOLO 检测结果与 LLM 语义推理串成一条管线,省去自己写胶水代码
  • 以自然语言查询视频内容,降低非视觉专业开发者的使用门槛
  • Python 实现,依赖主流视觉与 LLM 生态,原型搭建速度快

不足之处

  • 早期项目,API 与文档可能频繁变动,稳定性待观察
  • 视频逐帧处理对算力与调用成本敏感,大规模场景缺少优化说明

适用场景

  • 监控视频片段的对象检索与语义问答
  • 教学或演示场景中自动生成视频内容描述
  • 快速验证「检测+LLM」组合的算法原型

替代项目

Video-LLaVA、LLaVA-NeXT-Video、Grounding DINO

上一篇:inference

下一篇:mmcv

同类项目推荐

dsh-vision-router 开源

一条命令给文本 agent 装上眼睛,免费看图问答

Eyes for text-only DeepSeek Harness agents: built-in free vision chain (no key) + pi···

★ 1174 2026-09-19
D-FINE-seg 开源

检测加分割一网打尽,训练到 TensorRT 部署全流程

D-FINE-seg Object Detection and Segmentation Framework (Train, Export, Inference)

★ 219 2026-09-20
obsidian-ocr 开源

让 Obsidian 搜索穿透图片和 PDF,截图文字也能搜到

Obsidian OCR allows you to search for text in your images and pdfs

★ 304 2026-10-18
annolid 开源

拖拽标注视频,自动追踪动物并分析行为

An annotation and instance segmentation-based multi-object tracking and behavior ana···

★ 59 2026-08-09
fashn-vton-1.5 开源

上传衣服和照片,秒出试穿效果,无需手动抠图

FASHN VTON v1.5: Efficient Maskless Virtual Try-On in Pixel Space

★ 364 2026-08-09
EventGPT 开源

让大模型看懂事件相机数据,实现动态场景理解与问答

[CVPR2025] EventGPT: Event Stream Understanding with Multimodal Large Language Model···

★ 115 2026-08-09
yomihon 开源

看日漫直接 OCR 查词,边读边学不切应用

Free and open source manga reader for Android - now with OCR (text recognition)

★ 139 2026-09-19
ExtractPDF4J 开源

Java 库从文本/扫描 PDF 里抽结构化表格

Java PDF table extraction & OCR library. Extract structured tables from text-based a···

★ 508 2026-09-19