spoken-to-signed-translation

把口语文本一路转成手语视频的流水线

开源 🏷️定价信息待确认 ✅ 目前可打开 行业应用 🍴 复刻 29 🐛 待处理 17 👀 关注 9
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 105
维护状态 较活跃
是否开源 开源
定价模式 🏷️定价信息待确认

项目预览

spoken-to-signed-translation 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类行业应用
开发团队sign-language-processing
定价模式🏷️定价信息待确认
价格说明定价信息待确认
访问状态✅ 目前可打开
是否开源是
开源协议MIT
主要语言Python
技术栈/模型machine-translation,sign-language
GitHub 星标★ 105
上线时间2023-05-15 00:00:00
代码更新2026-10-18
仓库体积128.4 MB
本站数据更新2026-11-05
维护状态较活跃
收录时间2026-09-11
浏览次数15

项目介绍

spoken-to-signed-translation 是一个面向口语到手语翻译的开源流水线,将语音或文本先转写为口语文本,再经过文本到手语注释(gloss)的机器翻译,接着把 gloss 序列映射为骨骼姿态(pose),最终渲染成手语视频。它解决的核心问题是手语翻译缺乏端到端可复现工具链:传统方案要么只做文本翻译,要么依赖昂贵的动作捕捉数据。项目把多个阶段解耦成可替换模块,方便研究者分别优化翻译模型、姿态生成和视频合成。核心能力包括基于机器翻译的 gloss 生成、姿态序列预测、以及从姿态到视频的渲染管线,适合作为手语生成研究的基线框架。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-09-11 · 当前星标 ★ 105

技术标签

核心亮点

  • 提供文本→gloss→pose→video 的完整可运行管线,阶段解耦便于替换模块
  • 基于 Python 与机器翻译生态,方便复用现有 NLP 模型和姿态数据
  • 面向手语翻译这一低资源场景,填补端到端工具链空白

不足之处

  • 项目处于早期,星标少,文档与示例可能不完善
  • 手语语法和地域差异大,通用 gloss 与姿态映射的准确性待验证

适用场景

  • 手语教学辅助:把课堂口语内容自动生成手语演示视频
  • 无障碍服务:为听障用户将文字通知转为手语动画
  • 手语生成研究:作为基线管线快速对比不同翻译与姿态模型

替代项目

OpenHands、SignWriting、How2Sign

上一篇:ImageTrans-docs

下一篇:zhilv-yuntu

同类项目推荐

book-translator 开源

本地离线整本书翻译,术语一致还能对照校对

Tolmach — open-source AI book translator powered by Ollama. Translate EPUB, PDF, DO···

★ 127 2026-10-06
divination 开源

抛硬币出卦,AI 给你解卦,玩转玄学新体验

AI 算卦 - 随机六次硬币结果,生成卦象,并使用 AI 解读

★ 166 2026-08-09
jobsync 开源

自托管求职助手,AI 帮你管申请、改简历、提效率

Job application tracker and AI-powered job search assistant. Helps job seekers manag···

★ 1496 2026-08-09
bio 开源

一句话问遍文献、临床试验和药品标签

The world's most powerful open-source bio AI assistant - Access academic literature,···

★ 353 2026-09-30
maverick-mcp 开源

让 Claude 直接帮你查行情、跑回测、做个股分析

Stock market MCP server for Yahoo Finance data, technical analysis, portfolio tracki···

★ 719 2026-09-16
awesome-LLM-AIOps 开源

一页看清 LLM 做智能运维的全部论文与落地案例

A list of awesome academic researches and industrial materials about Large Language ···

★ 678 2026-09-15
aurelio-finance 开源

自托管管住净资产和投资,AI 顾问帮你出主意

Open-source personal finance app with an AI financial advisor: track your net worth,···

★ 350 2026-10-10
lexfridman-cn 开源

506 期播客中文精读,先看摘要再听原声

Lex Fridman 播客中文导航站:506 期全目录、AI 中文精读、官方音频/文稿与全文 RSS | Chin···

★ 249 2026-10-24
CLOV 开源

用 AI 给社交大V的代币估值,对话即查询

Valuation of tokens corresponding to influential individuals on social platforms thr···

★ 230 2026-08-09