项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 617
使用教程
环境要求
- Python 3.10
- GPU 显存 16G 以上
- 示例素材
安装与启动步骤
-
1建环境
指定解释器版本,依赖较重,建议单独环境。
conda create -n aether python=3.10 -
2装依赖
按仓库给的清单装,缺哪个补哪个。
pip install -r requirements.txt -
3跑三种任务之一
重建、预测、规划是三条独立通路,先挑一条跑通。
python scripts/demo.py --task reconstruction --video ./assets/example_videos/moviegen.mp4 -
4换自己的视频
输入换成你的片段,视角单一时重建质量会明显下降。
-
5起交互界面
要手调参数就用图形界面,比命令行直观。
python scripts/demo_gradio.py
如何确认成功
用自己的短视频能重建出带深度与相机轨迹的场景,且预测出的画面与原视频走向一致
注意事项
- 它把几何重建与生成模型接在一起,思路比单一任务模型复杂。
- 三条任务通路的输入格式不同,别混着喂。
- 显存需求随分辨率和帧数上得很快,先降分辨率跑通。
- 依赖版本较敏感,环境装歪是最常见的失败原因。
核心亮点
- 首个将几何感知显式融入视频生成的世界模型,解决生成内容空间不一致的痛点
- 统一支持4D重建与生成,可同时输出视频和几何结构,适用性强
- 代码开源且提供预训练模型,便于复现和二次开发
不足之处
- 项目处于早期,文档和社区支持待观察
- 对计算资源要求高,普通开发者难以快速上手
适用场景
- 具身智能机器人训练中的视觉空间理解
- 4D场景重建与动态内容生成
- 自动驾驶或导航中的几何感知视频预测
替代项目
Genie、World Models、VideoPoet
上一篇:epipolar-dpo
下一篇:Light-A-Video
同类项目推荐
VideoHub
开源
一句话驱动多平台视频下载、转写、配音到成片
VideoHub 是一款本地化多平台视频处理与智能剪辑工具,支持 YouTube、抖音/TikTok、Instag···
daihuo-jianshou
开源
上传商品图,AI自动生成带货短视频,适配多平台
自动生成电商带货短视频:上传商品图,AI 生成脚本、素材并合成视频,适配抖音、快手、小红···
StoryGen-Atelier
开源
输入故事创意,自动生成分镜、过渡片段并拼成视频
AI-assisted storyboard and video generation tool. Uses Gemini for generating storybo···
Chaosaiart-Nodes
开源
在 ComfyUI 里轻松做 AI 动画,切换模型和提示词不卡壳。
Use AI to Animate - ComfyUI Custom Nodes include IMG Caches, Switches, Prompt & Chec···
motion-latent-diffusion
开源
输入文字,秒级生成高质量3D人体动作
[CVPR 2023] Executing your Commands via Motion Diffusion in Latent Space, a fast and···
frametell
开源
丢想法和素材,AI 导演自动剪出讲解视频
Frametell: turn your ideas and material into vivid explainer videos with an AI direc···
ai-video-summarizer
开源
上传视频,自动转写、摘要、剪出高光片段
An AI-powered tool for transcribing, summarizing, and creating smart clips from vide···
Stable-Video-Infinity
开源
让视频扩散模型无限延长也不崩坏
[ICLR 26 Oral] Stable Video Infinity: Infinite-Length Video Generation with Error Re···
sora-prompt
开源
收集 Sora 提示词,激发 AI 视频创作灵感
Sora Prompt Collection, a repository dedicated to inspiring AI-driven video creation···
