mlx-audio-swift

在苹果芯片上,用 Swift 轻松实现本地语音/音频 AI 处理。

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 音频音乐 🍴 复刻 190 🐛 待处理 23 👀 关注 10
GitHub ↗
GitHub 星标 ★ 819
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源MIT协议,完全免费,可自行部署使用。

项目预览

mlx-audio-swift 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类音频音乐
开发团队Neywa-Labs
定价模式🏷️完全免费
价格说明开源MIT协议,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Swift
技术栈/模型mlx,mlx-audio,mlx-audio-swift,mlx-swift-audio,speech-to-speech,speech-to-text,stt,text-to-speech,tts
GitHub 星标★ 819
上线时间2025-12-03 00:00:00
代码更新2026-11-03
仓库体积96.3 MB
本站数据更新2026-11-07
维护状态活跃
收录时间2026-08-09
浏览次数7

项目介绍

mlx-audio-swift 是一个专为 Apple Silicon 设计的模块化 Swift 音频处理 SDK,基于 MLX 框架构建。它解决了在苹果生态中高效运行语音和音频 AI 模型的问题,提供语音转文字(STT)、文字转语音(TTS)以及语音到语音(speech-to-speech)的完整能力。核心能力包括:利用 MLX 的硬件加速实现低延迟推理,支持多种主流音频模型,并提供简洁的 Swift API 便于开发者集成。该 SDK 旨在让开发者能够轻松构建原生 macOS/iOS 音频应用,无需依赖云端服务,实现本地化、隐私安全的音频处理。项目处于早期阶段,但已具备模块化架构,便于扩展和定制。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 819

使用教程

ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。

难度:进阶 约 25 分钟 部署方式:本地安装 4 步

环境要求

  • Apple Silicon Mac
  • Xcode 15+
  • macOS 14+

安装与启动步骤

  1. 1确认硬件

    这是给 Apple Silicon 用的音频 SDK,Intel Mac 跑不了。

    uname -m   # 需要 arm64
  2. 2克隆并打开工程

    Swift Package 用 Xcode 打开 Package.swift 即可。

    git clone https://github.com/Blaizzy/mlx-audio-swift.git
    open mlx-audio-swift/Package.swift
  3. 3拉依赖

    MLX 相关包由 SwiftPM 解析,首次会比较慢。

    swift package resolve
  4. 4跑示例

    仓库带 example target,先跑它验证麦克风与推理链路。

    swift run

如何确认成功

示例程序能录一段音频并输出转写或合成结果。

注意事项

  • MLX 走统一内存,长音频要注意内存占用。
  • 签名缺失时麦克风权限会被静默拒绝,检查系统隐私设置。

核心亮点

  • 专为 Apple Silicon 优化,充分利用 MLX 硬件加速,性能出色
  • 模块化设计,STT/TTS/语音到语音能力开箱即用,集成简单
  • 纯 Swift 实现,与苹果生态无缝衔接,适合构建原生应用

不足之处

  • 项目处于早期阶段,API 可能不稳定,文档和示例相对有限
  • 依赖 MLX 生态,模型支持范围可能不如 Python 生态广泛

适用场景

  • 在 macOS/iOS 应用中实现本地语音听写和命令控制
  • 构建离线语音助手或实时语音翻译工具
  • 开发无障碍应用,为视障用户提供语音交互

替代项目

whisper.cpp、swift-transformers、mlx-whisper

上一篇:CloneTTS

下一篇:flutter_tts

同类项目推荐

OpenAI-Audiobook-Generator 开源

输入文本,一键生成有声书音频

This project is a web-based application that converts text into audio, primarily foc···

★ 86 2026-08-09
tacotron 开源

用 TensorFlow 复现谷歌 Tacotron,快速实现文本转语音

A TensorFlow implementation of Google's Tacotron speech synthesis with pre-trained m···

★ 2997 2026-08-09
cosyvoice-docker 开源

一条命令部署阿里 CosyVoice,带界面和 API,秒级克隆音色

️ CosyVoice All-in-One Docker - Production-ready TTS with Web UI, REST API & Voice ···

★ 89 2026-08-09
react-speech-highlight-demo 开源

让文字跟着语音走,边听边读不迷路

React / Vanilla JS Text to Speech with highlighting the words and sentences that are···

★ 190 2026-08-09
RealtimeTTS 开源

实时把文字变语音,低延迟流式输出,轻松集成各种 TTS 引擎。

Converts text to speech in realtime

★ 4051 2026-08-09
ttsmms 开源

一键调用MMS模型,让数百种语言开口说话

TTS with The Massively Multilingual Speech (MMS) project

★ 238 2026-08-09
voc2vec 开源

让机器听懂笑声哭声,解锁非语言声音的语义

This repository contains the code for the paper "voc2vec: A Foundation Model for Non···

★ 59 2026-08-09
text-to-speech 开源

在 Capacitor 应用里一行代码实现文字转语音

⚡️ Capacitor plugin for synthesizing speech from text.

★ 130 2026-08-09
obs-squawk 开源

在 OBS 里直接生成实时 AI 语音,直播播报不用切软件

Real-time Text-to-Speech AI Engine built-in OBS, integrative and intuitive

★ 71 2026-08-09