MMAD

用统一基准测出多模态大模型在工业质检中的真实水平

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 评测安全 🍴 复刻 19 🐛 待处理 2 👀 关注 3
GitHub ↗
GitHub 星标 ★ 277
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源代码与数据集,免费使用

项目预览

MMAD 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类评测安全
开发团队jam-cc
定价模式🏷️完全免费
价格说明开源代码与数据集,免费使用
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Python
GitHub 星标★ 277
上线时间2024-09-23 00:00:00
代码更新2026-10-23
仓库体积86.0 MB
本站数据更新2026-10-28
维护状态活跃
收录时间2026-10-28
浏览次数0

项目介绍

MMAD 是发表于 ICLR'25 的多模态大语言模型工业异常检测综合基准,提供配套代码与数据。项目针对工业质检场景中 MLLM 能力缺乏统一评测的问题,构建覆盖多类工业异常任务的数据集与评测流程,用于系统衡量模型在缺陷识别、异常定位与语义理解上的表现。核心能力包括标准化任务定义、可复现的评测脚本、与主流多模态模型对接的推理接口,以及公开的标注数据组织方式。研究者可基于该基准横向比较不同 MLLM 在工业异常检测中的强弱项,定位模型在细粒度缺陷判别上的短板,并作为方法改进的对照基线。项目以 Python 实现,结构清晰,适合作为工业视觉与大模型交叉方向的研究起点,也可为质检算法选型提供参考依据。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-10-28 · 当前星标 ★ 277

核心亮点

  • 提供标准化任务定义与评测脚本,结果可复现、可横向对比
  • 配套公开数据集与标注组织方式,降低工业异常检测研究的数据门槛
  • 发表于 ICLR'25,任务设计与评测维度有学术背书

不足之处

  • 早期项目,星标与社区规模较小,问题反馈和第三方复现经验有限
  • 基准覆盖的工业场景与缺陷类型受数据集限制,迁移到新产线需额外适配

适用场景

  • 研究团队横向评测多个多模态大模型在工业缺陷识别上的能力差异
  • 质检算法选型时用统一基准验证候选模型的实际表现
  • 作为论文或方法改进的对照基线,定位模型在细粒度异常判别上的短板

替代项目

MVTec AD、VisA、Anomalib

同类项目推荐

RVCBench 开源

给语音克隆模型做安全体检,防伪造保隐私

Comprehensive voice cloning evaluation: seven automatic speech metrics and ready-to-···

★ 58 2026-08-09
factcircuit 开源

给 AI 事实核查装上可审计的证据链和可复现评测

FactCircuit: an auditable claim-and-evidence verification loop with immutable proven···

★ 875 2026-10-04
EvalForge 开源

给 AI 评测加回归门禁,指标一降 CI 就拦。

Evaluator-neutral AI evaluation evidence, baseline regression gates, and JSON, JUnit···

★ 194 2026-09-12
ClawdSecbot 开源

给 AI Bot 装上实时安全盾牌,防注入、防攻击、可审计。

ClawdSecbot is a professional AI Bot security protection solution, providing securit···

★ 93 2026-08-09
valqore 开源

给 AI 运维操作装上安全气囊,防止误操作搞垮云环境

Safety-first guardrails for AI-driven cloud and Kubernetes operations

★ 1873 2026-08-09
CL4R1T4S 开源

看穿AI底牌,一键获取各大模型系统提示词

LEAKED SYSTEM PROMPTS FOR CHATGPT, CLAUDE, GEMINI, GROK, PERPLEXITY, CURSOR, LOVABLE···

★ 51536 2026-08-09
rag-arena 开源

让用户投票,选出最好的 RAG 系统

Open-source RAG evaluation through users' feedback

★ 222 2026-08-09
awesome-gpt-6-astra 开源

一份清单,带你安全玩转GPT-6 Astra的实战用例与提示词。

Evidence-backed use cases, prompts, integrations, evaluations, and safety notes for ···

★ 10 2026-09-07
tool-retrieval-benchmark 开源

测测你的检索模型会不会挑工具,让LLM用对工具

Official code for ACL2025 " Retrieval Models Aren’t Tool-Savvy: Benchmarking Tool R···

★ 220 2026-08-09