hailo_model_zoo_genai

Hailo 芯片跑生成式模型的开箱即用模型库

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 基础设施 🍴 复刻 24 🐛 待处理 1 👀 关注 8
GitHub ↗
GitHub 星标 ★ 118
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费,需Hailo硬件部署

项目预览

hailo_model_zoo_genai 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类基础设施
开发团队hailo-ai
定价模式🏷️完全免费
价格说明开源免费,需Hailo硬件部署
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言C++
GitHub 星标★ 118
上线时间2025-06-08 00:00:00
代码更新2026-11-01
仓库体积243 KB
本站数据更新2026-11-02
维护状态活跃
收录时间2026-11-02
浏览次数0

项目介绍

hailo_model_zoo_genai 是 Hailo 官方维护的生成式 AI 模型仓库,面向 Hailo 系列边缘 AI 加速芯片,提供可直接部署的生成式模型资源。项目解决的是边缘设备上运行生成式模型时模型适配与编译链路复杂的问题:它汇集经过验证的模型配置、编译脚本与预处理流程,把上游模型转换为 Hailo 可执行的格式,并给出推理示例。核心能力包括覆盖文本生成、语音识别与合成、视觉生成等类别的模型清单,配套的模型下载、量化编译与精度评估工具,以及与 HailoRT 运行时对接的示例代码。项目以 C++ 实现,便于在嵌入式与边缘计算环境中集成,适合需要在低功耗硬件上落地生成式 AI 能力的开发者与产品团队,作为模型选型和部署的起点。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-11-02 · 当前星标 ★ 118

核心亮点

  • 官方维护,模型配置与编译脚本与 Hailo 硬件和运行时版本配套,减少适配踩坑
  • 覆盖文本、语音、视觉等多类生成式模型,提供统一清单便于选型
  • 附带量化编译与精度评估流程,可在边缘设备上验证部署效果

不足之处

  • 强绑定 Hailo 专用硬件,无该硬件时无法实际运行
  • 早期项目,模型数量与文档完善度仍在积累

适用场景

  • 在 Hailo 边缘加速卡上部署本地文本生成模型
  • 为嵌入式设备集成语音识别或语音合成能力
  • 在低功耗硬件上做视觉生成模型的量化与推理验证

替代项目

onnxruntime、openvino_notebooks、tensorflow_model_garden

上一篇:monocle

下一篇:LiteRT

同类项目推荐

mlops-project-template 开源

在Azure上快速搭建企业级MLOps流水线,省时又规范。

Azure MLOps (v2) solution accelerators. Enterprise ready templates to deploy your ma···

★ 85 2026-08-09
awesome-llm-token-optimization 开源

一站式收藏 LLM 省钱秘籍,快速降低 Token 成本

A curated list of strategies, tools, papers, and resources for reducing LLM token co···

★ 108 2026-08-09
agentcat-typescript-sdk 开源

给 MCP 服务器装上监控,一眼看清工具调用数据

AgentCat is an analytics platform for MCP server owners .

★ 127 2026-08-09
coai 开源

一个后台管所有 AI 模型,自动计费与路由,省心省钱

Next Gen Multi-tenant AI One-Stop Solution. Builtin Admin & Billing System. Enterpri···

★ 9341 2026-08-09
LLaMA_MPS 开源

在 Mac 上让 LLaMA 跑得更快,用上 GPU 加速推理。

Run LLaMA (and Stanford-Alpaca) inference on Apple Silicon GPUs.

★ 577 2026-08-09
LocalAI 开源

旧电脑不装显卡,也能本地跑起 AI 全家桶

LocalAI is the open-source AI engine. Run any model - LLMs, vision, voice, image, vi···

★ 50108 2026-08-09
ai-memory-gateway 开源

给任何AI加上长期记忆,改个接口就行

给AI加长期记忆的轻量网关 / A lightweight gateway that adds long-term memory to any L···

★ 164 2026-08-09
mlflow 开源

每次实验全程留痕,模型好坏一眼看清不靠猜

The open source AI engineering platform for agents, LLMs, and ML models. MLflow enab···

★ 28613 2026-08-09
python-sdk 开源

用 Python 轻松操作 Pinecone 向量库,快速实现向量检索

Official Python SDK for the Pinecone vector database

★ 456 2026-08-09