datumaro

一个工具搞定 CV 数据集格式转换与质量检查

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 数据集 🍴 复刻 168 🐛 待处理 38 👀 关注 11
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 699
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,无付费版本。

项目预览

datumaro 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类数据集
开发团队open-edge-platform
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,无付费版本。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型coco,computer-vision,dataset,datasets,deep-learning,format-converter,geti,imagenet,neural-networks,pascal-voc,yolo
GitHub 星标★ 699
上线时间2020-09-01 00:00:00
代码更新2026-11-09
仓库体积378.6 MB
本站数据更新2026-11-10
维护状态活跃
收录时间2026-08-10
浏览次数6

项目介绍

datumaro 是一个面向计算机视觉的数据集管理框架,提供 Python 库和命令行工具,用于构建、分析和维护 CV 数据集。它解决的核心问题是深度学习项目中数据集格式混乱、转换繁琐、质量难以把控的痛点。核心能力包括:支持 COCO、Pascal VOC、YOLO、ImageNet 等多种主流标注格式的导入导出与互转;提供数据集统计分析、标签分布查看、错误样本筛选等质量检查功能;支持数据集合并、拆分、过滤、重命名等操作,方便构建训练/验证集;还提供插件机制,可扩展自定义格式和操作。通过统一的 API 和 CLI,用户能高效管理多源数据集,减少重复劳动,提升数据准备阶段的效率。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-10 · 当前星标 ★ 699

使用教程

难度:进阶 约 35 分钟 部署方式:本地安装 4 步

环境要求

  • Python 3.8+
  • 带标注的数据集

安装与启动步骤

  1. 1安装

    数据集工具,pip 装完有 CLI 入口。

    pip install datumaro
  2. 2导入数据

    支持多种标注格式互转,先确认自己的源格式在支持列表里。

    datum convert -i source -if coco -o out -of datumaro
  3. 3做转换与切分

    转换同时可以做过滤和切分,一条命令完成比多步脚本稳。

  4. 4校验统计

    转换后看统计信息,标注数量对不上说明映射规则有问题。

    datum stats out

如何确认成功

转换后类别与样本数与源一致

注意事项

  • 格式映射错了不会报错,只会静默丢标注,务必看统计。
  • 大文件用流式处理,避免一次性读进内存。

核心亮点

  • 支持 COCO、VOC、YOLO 等十余种格式互转,省去手写脚本
  • 内置数据集统计与质量分析,快速发现标注问题
  • 提供 Python API 和 CLI 双接口,灵活集成到现有流程

不足之处

  • 文档/社区待观察
  • 对视频或 3D 点云等非图像数据集支持有限

适用场景

  • 数据准备阶段批量转换标注格式
  • 训练前检查数据集标签分布和异常样本
  • 合并多个来源的数据集并自动去重

替代项目

FiftyOne、SuperAnnotate、Label Studio

上一篇:dataset-serialize

下一篇:mimesis

同类项目推荐

autolabel 开源

用 LLM 自动标注文本数据,省时省力

Label, clean and enrich text datasets with LLMs.

★ 2332 2026-08-09
Recommendations-Diffusion-Text-I··· 开源

一册在手,快速掌握扩散模型在文本图像生成的全部前沿论文。

A paper collection of recent diffusion models for text-image generation tasks, e,g.,···

★ 271 2026-08-09
DocCreator 开源

一键批量造带真值的文档图,OCR训练数据不用愁

DIAR software for synthetic document image and groundtruth generation, with various ···

★ 139 2026-10-18
crackmes-re-dataset 开源

4598个crackme带答案和混淆标签,逆向研究直接开跑

Labeled reverse-engineering dataset over 4,598 crackmes: flags, verifier scripts, an···

★ 147 2026-09-21
shisei 开源

250+多角度人体姿势线稿,免费可商用

Free CC0 mannequin pose reference library for AI image tools (Nano Banana, ChatGPT, ···

★ 477 2026-11-06
ShareGPT4Video 开源

用GPT-4V生成高质量视频描述,提升视频理解与生成效果

[NeurIPS 2024] An official implementation of "ShareGPT4Video: Improving Video Unders···

★ 1096 2026-08-09
APSD 开源

看穿对抗攻击:用视觉标准量化扰动隐蔽性

Official dataset for “Stealthiness Assessment of Adversarial Perturbation: From a V···

★ 11 2026-09-05
dataset-viewer 开源

不下载数据集,网页直接看样本和统计

Backend that powers the dataset viewer on Hugging Face dataset pages through a publi···

★ 908 2026-09-21
candy-machine 开源

给训练集打标,快人一步

Image Dataset Tagger for Stable Diffusion / Lora / DreamBooth Training

★ 56 2026-08-09