
Step-Audio-EditX
用一句话编辑语音情感和风格,还能零样本合成新声音
项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 996
使用教程
ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。
环境要求
- Python + PyTorch
- Hugging Face 账号/访问
- GPU(推理 3B 模型)
安装与启动步骤
-
1获取模型
从 Hugging Face(stepfun-ai/Step-Audio-EditX)下载权重。
-
2加载并编辑
按示例加载模型,用自然语言指令编辑音频(情感/风格/副语言)。
-
3推理合成
运行推理脚本做零样本语音合成或情感迁移。
如何确认成功
加载后能用文本指令把中性语音转为开心/悲伤等情感,或做风格迁移。
常见问题
Q:支持哪些编辑?
A:情感编辑、说话风格迁移、副语言特征调整与零样本语音合成。
注意事项
- 基于 3B 参数与强化学习;详见 Hugging Face 仓库与 arXiv 技术报告。
核心亮点
- 基于强化学习,能精准控制情感、风格和副语言特征,编辑效果自然
- 3B 参数模型,在零样本 TTS 上表现强,新说话人合成无需微调
- 支持跨语言,适合多语种音频内容创作和本地化
不足之处
- 3B 参数模型对部署资源要求较高,个人开发者使用门槛不低
- 文档/社区待观察,早期项目生态和示例尚不丰富
适用场景
- 语音内容后期制作,如播客、有声书的情感润色
- 游戏或虚拟角色语音风格定制,快速生成不同情绪台词
- 多语种配音和本地化,用自然语言调整语音风格
替代项目
XTTS、Bark、CosyVoice
下一篇:FireRedTTS
同类项目推荐
OpenVoice
开源
给一段录音,立刻复刻出同款声音,谁都能当配音员
Instant voice cloning by MIT and MyShell. Audio foundation model.
DNN-HSMM
开源
用 DNN+HSMM 打造更自然的语音合成声学模型
pytorch implementation of DNN-HSMM for TTS
X2Streaming-TTS
开源
文本边说边转语音,首句秒出声
tts-azure-web
开源
用 Azure Key 一键部署,网页上直接生成自然语音
TTS Azure Web 是一个 Azure 文本转语音(TTS)网页应用,可以在本地或者云端使用你的 Azu···
nix-tts
开源
轻量级端到端TTS,模块蒸馏实现边缘设备实时语音合成
Nix-TTS: Lightweight and End-to-end Text-to-Speech via Module-wise Distillation
elevenlabs-js
开源
用 Node.js 快速接入 ElevenLabs 高质量 AI 语音合成
The official JavaScript (Node) library for the ElevenLabs API.
ncnn-android-piper
开源
手机本地跑神经语音合成,离线秒出中文英文语音
ncnn android piper the fast and local neural text-to-speech engine
HebTTS
开源
跳过元音预测,直接让AI用希伯来语开口说话
The official implementation of "A Language Modeling Approach to Diacritic-Free Hebre···
awesome-controllable-speech-synt···
开源
一页看清可控语音合成论文、数据集与开源实现
This is an evolving repo for the paper "Towards Controllable Speech Synthesis in the···