ai-edge-quantizer

已训练好的 LiteRT 模型直接量化压缩,端侧部署更小更快

开源 free 模型训练
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 210
维护状态 活跃
是否开源 是
定价模式 free

项目预览

项目数据

分类模型训练
开发团队google-ai-edge
所属国家
官网地址
定价模式free
价格说明开源免费
访问状态
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型
GitHub 星标★ 210
30天Star增速
HF 下载量
上线时间2024-05-06 00:00:00
代码更新—
仓库体积—
本站数据更新—
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-10-17
浏览次数0

项目介绍

ai-edge-quantizer 是 Google AI Edge 团队推出的开源后训练量化工具,专门为 LiteRT(原 TensorFlow Lite)模型提供灵活的量化能力。它解决的核心问题是:端侧模型部署时体积大、推理慢、内存占用高,而传统量化流程往往需要重新训练或依赖复杂的手动配置。该工具允许开发者对已训练好的 LiteRT 模型直接进行后训练量化,无需重新训练即可压缩模型,并支持多种量化策略和粒度,例如按张量或按通道量化、权重与激活的位宽选择等。核心能力包括:对 LiteRT 模型进行权重量化、激活量化及混合精度配置,生成体积更小、推理更快的端侧模型,同时尽量保持精度。它面向移动端、嵌入式设备和边缘 AI 场景,帮助开发者在资源受限的硬件上部署更高效的模型,是 AI Edge 端侧推理工具链的重要一环。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

正在加载星标数据…

技术标签

使用教程

—

核心亮点

  • 无需重新训练即可对 LiteRT 模型做后训练量化,降低端侧部署门槛
  • 支持灵活的量化配置,可按张量或按通道选择权重与激活位宽
  • 由 Google AI Edge 团队维护,与 LiteRT 推理生态天然集成

不足之处

  • 项目处于早期阶段,星标仅 210,社区生态和第三方教程较少
  • 量化策略的文档与示例可能不够丰富,复杂模型调优需自行摸索

适用场景

  • 移动端 App 集成 LiteRT 模型时压缩体积、提升推理速度
  • 嵌入式或 IoT 设备上部署视觉/语音模型,受限于内存与算力
  • 边缘 AI 产品在保持可接受精度的前提下降低模型存储与带宽成本

替代项目

TensorFlow Lite 官方量化工具、ONNX Runtime 量化工具

上一篇:model-optimization

下一篇:qwix

同类项目推荐

Long-RL 开源

让强化学习轻松驾驭超长序列,训练更稳更快

Long-RL: Scaling RL to Long Sequences (NeurIPS 2025)

★ 729 2026-08-09
TPA 开源

把注意力复杂度从平方降到线性,长序列不再卡顿

[NeurIPS 2025 Spotlight] TPA: Tensor ProducT ATTenTion Transformer (https://arxiv.or···

★ 464 2026-08-09
minimind 开源

两小时造出你的小模型,练手入门不求人

Train a 64M-parameter LLM from scratch in just 2h!

★ 63828 2026-08-09
pruna 开源

一键优化 AI 模型,推理提速又省资源。

Pruna is a model optimization framework built for developers, enabling you to delive···

★ 1317 2026-08-13