strata-mlx

在 Mac 上用 MLX 跑 Strata 格式模型

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 基础设施 🍴 复刻 18 🐛 待处理 8 👀 关注 3
GitHub ↗
GitHub 星标 ★ 111
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费,无在线服务

项目预览

strata-mlx 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类基础设施
开发团队yibie
定价模式🏷️完全免费
价格说明开源免费,无在线服务
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
GitHub 星标★ 111
上线时间2026-10-10 00:00:00
代码更新2026-10-24
仓库体积1.9 MB
本站数据更新2026-11-13
维护状态较活跃
收录时间2026-11-13
浏览次数0

项目介绍

strata-mlx 是一个面向 Apple Silicon 的本地推理引擎,用 Python 基于 MLX 框架实现,目标是在 Mac 上加载并运行 Qwen3.8-Flash-Next 这类模型。它读取 Strata 格式的 GGUF 权重文件,并实现 Strata 的行协议(line protocol)通信方式,让上层工具或客户端能按该协议与本地模型交互。项目属于非官方实现,定位偏基础设施层:解决的是苹果芯片上缺少对应格式与协议兼容运行时的问题。核心能力包括 GGUF 权重解析与加载、MLX 张量计算后端、行协议请求/响应处理,以及面向 Qwen 系列模型的推理调度。适合想在本机做模型实验、验证协议兼容性或搭建轻量本地推理服务的开发者。项目处于早期,星标约 111,接口与实现可能随上游格式和协议变化而调整,使用前建议先阅读源码与示例。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-11-13 · 当前星标 ★ 111

核心亮点

  • 基于 MLX,直接利用 Apple Silicon 的 GPU 统一内存做推理
  • 实现 Strata 行协议,可作为协议兼容层接入现有客户端
  • 支持读取 Strata 的 GGUF 权重,打通非官方格式的本地加载链路

不足之处

  • 早期项目,星标约 111,接口与稳定性仍在演进
  • 非官方实现,与上游格式/协议的兼容性依赖作者跟进
  • 文档与社区规模有限,问题排查主要靠读源码

适用场景

  • 在 Mac 本机加载 Strata 格式 GGUF 模型做推理实验
  • 验证或对接 Strata 行协议的客户端与工具链
  • Apple Silicon 上的本地模型部署原型开发

替代项目

mlx-lm、llama.cpp、Ollama

上一篇:PS5LM-Plus

下一篇:MACaQ

同类项目推荐

llm-gateway 开源

一套接口接所有大模型,Agent 换供应商不用改代码

Open Source LLM Gateway

★ 7630 2026-09-16
ggml 开源

轻量级 C++ 张量库,让大模型在本地设备流畅跑起来

Tensor library for machine learning

★ 15618 2026-08-09
gpu-telemetry 开源

一个代理,让每块 GPU 的消耗都精确到 Pod 或作业

GPU Observability with workload attribution. One OTLP agent per node ties hardware m···

★ 77 2026-08-09
satoriDB 开源

把向量搜索嵌进你的应用,本地跑,快又省。

High performance embedded vector database

★ 245 2026-08-09
selfhostedAI 开源

一键自托管 AI,小白也能轻松跑起图像生成

A collection of one-click self-hosted AI

★ 411 2026-08-09
OpenGPT 开源

免费封装 GPT API,几行代码接入智能对话

OpenGPT 3.5/4 is a project aimed at providing practical and user-friendly APIs. The ···

★ 234 2026-08-09
kiro-gateway 开源

把免费 Claude 模型接到任意 AI 客户端,摆脱 AWS 工具锁

Proxy API gateway for Kiro IDE & CLI (Amazon Q Developer / AWS CodeWhisperer). Use f···

★ 2355 2026-08-09
gateway 开源

用 Rust 和 Go 打造 AI 时代的 Kubernetes 网关

Nantian Gateway — Kubernetes Gateway API implementation with AI proxy, WASM plugin ···

★ 54 2026-08-09
whylogs 开源

记录数据日志,实时监控模型质量与漂移

An open-source data logging library for machine learning models and data pipelines. ···

★ 2838 2026-08-09