character-policy

让数字人说话时全身动作跟着语音走

开源 🏷️完全免费 🔧 仅开源项目，无在线服务，需自行部署数字人3D 🍴 复刻 193 🐛 待处理 63 👀 关注 33

访问官网 ↗ GitHub ↗

GitHub 星标 ★ 1309

维护状态活跃

是否开源开源

定价模式 🏷️完全免费开源代码库，免费使用

项目预览

character-policy 项目界面预览图 — 图片来源：GitHub 官方仓库名片

项目数据

分类数字人3D

开发团队haiyangliu0

官网地址https://pantomatrix.github.io/EMAGE

GitHubhttps://github.com/haiyangliu0/character-policy

定价模式🏷️完全免费

价格说明开源代码库，免费使用

访问状态🔧 仅开源项目，无在线服务，需自行部署

是否开源是

主要语言Python

技术栈/模型3d-human-motion,audio-driven-animation,beat-dataset,beat2,character-animation,character-policy,co-speech-gesture,emage,flame,gesture-generation,holistic-gesture,smplx,talking-face-generation,virtual-human

GitHub 星标★ 1309

上线时间2022-07-11 00:00:00

代码更新2026-10-25

仓库体积412.0 MB

本站数据更新2026-11-01

维护状态活跃

收录时间2026-11-01

浏览次数0

项目介绍

character-policy 是面向多模态三维数字人的官方基准与代码库，聚焦整体协同语音手势策略（holistic co-speech gesture policy）。它解决的核心问题是：让虚拟角色在说话时生成与语音节奏、语义和情绪相匹配的全身动作，而不是只做口型或孤立的手势。项目提供统一的训练与评测框架，覆盖音频驱动动画、三维人体运动生成、角色动画等环节，并配套 BEAT/BEAT2 等协同语音手势数据集的评测流程，便于研究者复现实验、横向比较不同策略。核心能力包括多模态特征输入、整体手势策略建模、基准指标与可视化评测，适合数字人、虚拟主播、游戏 NPC 等需要自然说话动作的研究与工程场景。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-11-01 · 当前星标 ★ 1309

技术标签

talking-face-generation

使用教程

⚠ 本教程由 AI 依据该项目 README 整理；原始文档不完整，部分步骤为通用流程推断，实际安装请以项目官方文档为准。

难度：高级约 15 分钟部署方式：库/依赖 5 步

⚠ 该项目 README 未提供完整安装说明，以下步骤为通用流程，请以官方文档为准。

环境要求

Python 环境（README 未标注具体版本要求）
Git，用于克隆仓库
磁盘空间，用于存放仓库、模型权重与 BEAT/BEAT2 数据集
如需自己训练或推理，需具备可运行深度学习框架的算力环境（README 未列出具体依赖）

安装与启动步骤

1确认本地基础环境

先确认 Python 与 Git 可用。README 正文没有给出 Python 版本、依赖清单或安装命令，实际要求需以仓库内文档为准。
```
python --version
git --version
```
2克隆项目仓库

从项目给出的 GitHub 地址拉取代码，得到完整的训练与评测框架源码。
```
git clone https://github.com/haiyangliu0/character-policy.git
```
3进入目录查看文档

进入仓库后先阅读 README 与目录内说明文件，安装依赖与运行方式以仓库内实际内容为准。
```
cd character-policy
ls
```
4获取权重与数据集

项目在 HuggingFace 上提供模型权重与 BEAT2 数据集页面，按页面说明下载后放到仓库约定的数据目录。
5先体验在线演示

在本地环境配好之前，可先打开官方 HuggingFace Space 演示页，确认输入语音、文本后输出的动作效果是否符合预期。