OpenSearch-VL

让AI看懂图片并精准搜索,训练多模态搜索智能体

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 搜索知识 🍴 复刻 29 🐛 待处理 6 👀 关注 4
GitHub ↗
GitHub 星标 ★ 305
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,Apache-2.0许可证,完全免费,可自行部署使用。

项目预览

OpenSearch-VL 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类搜索知识
开发团队shawn0728
定价模式🏷️完全免费
价格说明开源项目,Apache-2.0许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型deep-research-agent,multimodal,opensource,search-agent,think-with-image,vlm-agent
GitHub 星标★ 305
上线时间2026-05-03 00:00:00
代码更新2026-10-20
仓库体积22.2 MB
本站数据更新2026-11-08
维护状态较活跃
收录时间2026-08-09
浏览次数6

项目介绍

OpenSearch-VL 是一个训练多模态深度搜索智能体的开源方案,旨在解决传统文本搜索无法理解图像、图表等视觉信息的问题。它通过高质量数据筛选、多样化的视觉与搜索工具集成,以及基于错误感知的强化学习,让智能体能够像人类一样进行多步骤的视觉信息检索和推理。项目提供了完整的训练流程和代码,支持从数据准备到模型微调的全过程,核心能力包括视觉问答、跨模态检索和复杂搜索任务分解。其创新点在于将强化学习引入多模态搜索,使模型能根据搜索反馈自我优化,从而提升在真实场景中的搜索准确性和效率。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 305

技术标签

核心亮点

  • 提供完整的多模态搜索智能体训练配方,包括数据、工具和强化学习算法
  • 集成多种视觉和搜索工具,支持复杂搜索任务分解与执行
  • 采用错误感知的强化学习,能根据反馈自动优化搜索策略

不足之处

  • 项目处于早期阶段,文档和社区支持待观察
  • 依赖大规模高质量视觉-文本数据,数据获取成本可能较高

适用场景

  • 构建能理解图像内容的搜索引擎或问答系统
  • 训练AI助手进行跨模态信息检索(如根据图表回答问题)
  • 研究多模态强化学习在信息检索中的应用

替代项目

ColPali、VLM2Vec、CLIP-based retrieval models

同类项目推荐

telegram-search 开源

一键导出Telegram聊天,用AI语义搜索找回任何记忆

导出并模糊搜索 Telegram 聊天记录 | Export and fuzzy search your Telegram chat histor···

★ 4142 2026-08-09
OpenDeepWiki 开源

开源版DeepWiki,让团队文档秒变智能问答库

OpenDeepWiki is the open-source version of the DeepWiki project, aiming to provide a···

★ 3658 2026-08-09
notebooklm-skill 开源

让 Claude Code 直接查你的 NotebookLM 私有文档,答案带引用

Use this skill to enable Claude Code to communicate directly with your Google Notebo···

★ 7787 2026-09-18
farfalle 开源

自建私有 AI 搜索,接入任意大模型,告别广告和隐私焦虑。

AI search engine - self-host with local or cloud LLMs

★ 3543 2026-08-09
mango-finder 开源

说句话就能跨设备找到文件,告别翻文件夹

Search your files across your devices with natural language | 使用自然语言跨设备搜索···

★ 253 2026-08-09
azure-search-openai-demo-csharp 开源

用 C# 在 Azure 上快速搭一个带引用的文档问答应用

A sample app for the Retrieval-Augmented Generation pattern running in Azure, using ···

★ 845 2026-11-09
awesome-jev 开源

按决策模式查AI Agent资源,选型不迷路

Launch what you built on Jev, TypeSafe AI's System One decision model: a weekly boar···

★ 599 2026-10-04
firecrawl-app-examples 开源

照着抄,快速搭出能用的网页抓取应用

This repository contains complete application examples, including websites and other···

★ 838 2026-08-09
my-rag 开源

导入文档建知识库,自然语言问答带权限隔离

我的rag系统,可以用于导入知识库进行知识问答,可集成第三方mcp,也做了权限隔离等

★ 157 2026-10-25