MLM_Filter

用多模态模型自动筛出高质量图文对,提升训练数据纯净度

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 1 🐛 待处理 3 👀 关注 1
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 71
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

MLM_Filter 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队Victorwz
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型data-filtering,data-quality-assessment,image-text-data,large-language-models,llava,multimodal-large-language-models
GitHub 星标★ 71
上线时间2024-02-27 00:00:00
代码更新2025-04-14
仓库体积31.4 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数6

项目介绍

MLM_Filter 是一个用于图像-文本数据过滤的开源工具,基于论文《Finetuned Multimodal Language Models are High-Quality Image-Text Data Filters》的官方实现。它利用微调后的多模态语言模型(如CLIP、BLIP等)来评估图像与文本之间的语义相关性,自动筛选出高质量的训练数据,解决多模态数据集中噪声多、匹配度低的问题。核心能力包括:加载预训练的多模态模型,对图像-文本对进行评分,支持自定义阈值过滤,并输出过滤后的数据集。该工具旨在提升多模态模型(如视觉语言模型)的训练数据质量,从而改善下游任务性能。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 71

核心亮点

  • 基于论文方法,过滤质量有理论保障
  • 支持多种预训练模型,灵活适配不同场景
  • 代码结构清晰,易于集成到现有数据流水线

不足之处

  • 依赖多模态模型推理,过滤速度可能较慢
  • 文档/社区待观察

适用场景

  • 多模态数据集清洗,去除图文不匹配样本
  • 预训练视觉语言模型前的数据预处理
  • 构建高质量图文对用于检索或生成任务

替代项目

CLIPScore、BLIP、Data Filtering (如LAION-AI/filter)

上一篇:ReaLHF

下一篇:AutoGPTQ

同类项目推荐

traceml 开源

一键诊断 PyTorch 训练瓶颈,提升 GPU 利用率

Find why PyTorch training is slow, compare runs, and catch performance regressions i···

★ 189 2026-08-09
whisper-vits-japanese 开源

只有音频也能训练日语VITS,Whisper自动生成文本标注

Vits Japanese with Whisper as data processor (you can train your VITS even you only ···

★ 161 2026-08-09
Rose 开源

无状态优化器,省内存,稳收敛,直接替换 Adam

Rose: Range-Of-Slice Equilibration PyTorch optimizer. Stateless optimization through···

★ 79 2026-08-09
Awesome-VLA-Post-Training 开源

VLA后训练方法一网打尽,快速找到微调方案

A collection of vision-language-action model post-training methods.

★ 262 2026-10-17
mct-model-optimization 开源

把神经网络量化剪枝压小,落到边缘芯片上跑

Model Compression Toolkit (MCT) is an open source project for neural network model o···

★ 450 2026-10-31
SPO 开源

分步优化扩散模型,让AI生图更懂审美

[CVPR 2025] Aesthetic Post-Training Diffusion Models from Generic Preferences with S···

★ 271 2026-08-09
MirrorMetrics 开源

用 InsightFace 人脸识别,直观诊断 LoRA 过拟合与数据质量。

MirrorMetrics: How to evaluate Stable Diffusion LoRAs. A visual diagnostic tool to d···

★ 62 2026-08-09
Dreambooth-Stable-Diffusion 开源

用几张照片,训练专属 Stable Diffusion 模型,生成你的定制图像。

Implementation of Dreambooth (https://arxiv.org/abs/2208.12242) by way of Textual In···

★ 3214 2026-08-09
Target-Driven-Distillation 开源

让扩散模型蒸馏更快更稳,生成质量不掉线

Consistency Distillation with Target Timestep Selection and Decoupled Guidance

★ 112 2026-08-09