arco-era5 是数据集领域的开源项目,由 google-research 开发,2022 年首次发布。
它收录于数据集分类,该分类目前共有 278 个项目,GitHub 星标数为 504。
项目目前处于活跃维护状态,最近一次代码更新于 2026-09-20。开源免费,数据托管于Google公共数据集。
它主要面向的使用场景是:气候科研团队自建云端ERA5数据集,供组内成员按区域时段快速切片分析。同类可对比的替代方案包括 pangeo-forge-recipes、xarray。

把 ERA5 气象数据转成云端 Zarr,按需秒读任意区域时段
arco-era5 是 Google Research 开源的配方仓库,用于把 ECMWF 的 ERA5 再分析数据(全球气象历史数据,含温度、风、气压、降水等变量)转换成 Analysis-Ready & Cloud Optimized(ARCO)格式。传统 ERA5 以 GRIB/NetCDF 分发,单变量单时刻文件多、下载慢、解压重,做气候分析前往往要花大量时间做格式转换和索引。本项目提供可复现的 Python 脚本与工作流,把原始数据重写成 Zarr 格式并上传到云存储,实现按需分块读取、并行加载和直接切片,无需整份下载。核心能力包括:批量转换 ERA5 各压力层与地面变量、生成云优化分块、保留时间与空间维度索引,让研究者用 xarray 一行代码即可拉取任意区域和时段。它本身不是数据服务,而是可复现的数据生产管线,适合需要自建 ERA5 云数据集的团队参考。
pangeo-forge-recipes、xarray
arco-era5 是数据集领域的开源项目,由 google-research 开发,2022 年首次发布。
它收录于数据集分类,该分类目前共有 278 个项目,GitHub 星标数为 504。
项目目前处于活跃维护状态,最近一次代码更新于 2026-09-20。开源免费,数据托管于Google公共数据集。
它主要面向的使用场景是:气候科研团队自建云端ERA5数据集,供组内成员按区域时段快速切片分析。同类可对比的替代方案包括 pangeo-forge-recipes、xarray。
上一篇:plinder
X-AnyLabeling
开源
一站式AI辅助标注,图像视频文本通吃,导出格式随心配
X-AnyLabeling: A lightweight, efficient, and unified cross-platform desktop applicat···
aisheets
开源
像用表格一样批量调 AI,不写代码就能造和改数据集
Build, enrich, and transform datasets using AI models with no code
distilabel
开源
基于论文的合成数据流水线,快速生成高质量 AI 反馈数据。
Distilabel is a framework for synthetic data and AI feedback for engineers who need ···
DataGen
开源
用大模型一键生成定制化训练数据,告别数据荒
[ICLR'25] DataGen: Unified Synthetic Dataset Generation via Large Language Models