项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 2256
使用教程
ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。
环境要求
- Linux 环境下运行的 Python 项目(README 未给出具体 Python 版本)
- 单张 NVIDIA H100 GPU(README 实测 19.5 FPS),或单张昇腾 NPU(约 10 FPS)
- 需自行安装与本机 CUDA 版本匹配的 PyTorch
- 仓库根目录需可执行 bash install.sh 安装依赖
安装与启动步骤
-
1获取源码
README 节选未给出克隆命令,此处使用项目官方 GitHub 地址获取源码并进入目录。
git clone https://github.com/PKU-YuanGroup/Helios.git cd Helios -
2安装 PyTorch
README 第 2 步要求安装 PyTorch,并提示按自己的 CUDA 版本调整,原文未给出具体安装命令。
-
3安装依赖
README 第 3 步为安装依赖,直接执行仓库自带的 install.sh 脚本。
bash install.sh -
4运行推理
进入推理脚本目录,README 说明该目录覆盖文生视频、图生视频、视频生视频,后续命令节选缺失。
cd scripts/inference
如何确认成功
进入 scripts/inference 执行对应推理脚本后能正常生成视频输出即视为成功(README 未给出具体验证命令)。
常见问题
Q:没有 H100 显卡能跑吗?
A:README 的性能数据基于单张 H100(19.5 FPS)与单张昇腾 NPU(约 10 FPS),其他硬件未说明;且模型为 14B,对显存要求较高。
Q:支持哪些生成任务?
A:README 明确提供文本到视频、图像到视频、视频到视频三类推理脚本,统一放在 scripts/inference 目录下。
Q:需要额外安装 KV-cache、量化等加速库吗?
A:不需要。README 强调 Helios 未使用 KV-cache、稀疏/线性注意力、量化等常规加速技术,即可在单张 H100 上达到 19.5 FPS。
Q:install.sh 执行失败怎么办?
A:先确认已安装与本机 CUDA 版本匹配的 PyTorch,再在仓库根目录重新执行 bash install.sh 安装剩余依赖。
注意事项
- 本次提供的 README 节选不完整,安装与推理部分的命令有缺失,实际操作请以仓库最新文档为准。
- README 未说明模型权重的下载地址与存放路径,运行前需自行确认权重准备方式。
- 项目宣称训练时最多可在 80GB 显存中放入四个 14B 模型,显存不足时需调整批大小。
核心亮点
- 支持实时长视频生成,突破传统时长限制
- 图像到视频的生成质量高,细节丰富
- 提供高效调优工具,便于模型定制
不足之处
- 文档/社区待观察
- 对硬件资源要求可能较高
适用场景
- 短视频创作与快速原型验证
- 影视预演和特效预览
- 实时交互式艺术生成
替代项目
CogVideo、ModelScope Text-to-Video、AnimateDiff
上一篇:LightX2V
同类项目推荐
claude-motion-design
开源
用 HTML 写动画,Playwright 截图,ffmpeg 出片
A Claude Code skill to make motion design videos in pure code: HTML + Playwright + f···
narrator-ai-cli
开源
终端敲一敲,解说视频自动生成
AI 解说大师 — CLI 客户端;用于终端调用视频解说生成 API
OmniVAE
开源
让AI同时生成音视频,跨模态对齐一步到位
A unified audio-video variational autoencoder with cross-modal alignment for joint r···
pireel
开源
让AI代理自动剪辑视频,开源替代CapCut
The open-source alternative to Capcut、ChatCut. Drivable by any AI agent over MCP.
improved-video-gan
开源
用GAN生成更连贯真实的视频,支持多任务扩展
GitHub repository for "Improving Video Generation for Multi-functional Applications"
champ
开源
用一张照片和动作序列,生成可控且一致的人体动画视频。
[ECCV 2024] Champ: Controllable and Consistent Human Image Animation with 3D Paramet···
World-R1
开源
给视频生成加上3D物理约束,让画面更稳定不扭曲
[ICML 2026] World-R1: Reinforcing 3D Constraints for Text-to-Video Generation
VideoLingo
开源
上传视频,一键生成 Netflix 级字幕和配音,轻松本地化搬运。
Netflix-level subtitle cutting, translation, alignment, and even dubbing - one-click···
Nomi
开源
让 AI 代理按你的故事板直接剪出视频初稿
Open-source AI video workbench. Bring any model or your local ComfyUI, and let Claud···
