Aether

让视频生成自带几何,赋能具身智能空间理解

开源 🏷️定价信息待确认 ✅ 目前可打开 视频生成 🍴 复刻 11 👀 关注 19
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 617
维护状态 低维护
是否开源 开源
定价模式 🏷️定价信息待确认

项目预览

Aether 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类视频生成
开发团队InternRobotics
定价模式🏷️定价信息待确认
价格说明定价信息待确认
访问状态✅ 目前可打开
是否开源是
开源协议MIT
主要语言Python
技术栈/模型4d-generation,4d-reconstruction,embodied-ai,foundation-models,multi-modal,navigation,spatial-intelligence,video-generation,video-prediction,visual-planning,world-model
GitHub 星标★ 617
上线时间2025-03-24 00:00:00
代码更新2025-10-26
仓库体积56.5 MB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数6

项目介绍

Aether 是一个面向具身智能与空间智能的统一世界模型,核心解决视频生成中几何一致性缺失的问题。它通过融合4D重建与生成技术,在生成视频的同时显式建模场景的几何结构,从而支持从单目视频中恢复4D动态场景,并可用于导航、交互等下游任务。项目提供完整的训练与推理代码,基于PyTorch实现,并附带预训练模型与评测基准。其核心能力包括:几何感知的视频生成、4D场景重建与生成、以及多模态空间理解。作为ICCV 2025的杰出论文,Aether 旨在为具身AI提供可泛化的空间先验,推动视频生成从‘像素级’走向‘几何级’。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 617

使用教程

难度:高级 约 90 分钟 部署方式:本地GPU 5 步

环境要求

  • Python 3.10
  • GPU 显存 16G 以上
  • 示例素材

安装与启动步骤

  1. 1建环境

    指定解释器版本,依赖较重,建议单独环境。

    conda create -n aether python=3.10
  2. 2装依赖

    按仓库给的清单装,缺哪个补哪个。

    pip install -r requirements.txt
  3. 3跑三种任务之一

    重建、预测、规划是三条独立通路,先挑一条跑通。

    python scripts/demo.py --task reconstruction --video ./assets/example_videos/moviegen.mp4
  4. 4换自己的视频

    输入换成你的片段,视角单一时重建质量会明显下降。

  5. 5起交互界面

    要手调参数就用图形界面,比命令行直观。

    python scripts/demo_gradio.py

如何确认成功

用自己的短视频能重建出带深度与相机轨迹的场景,且预测出的画面与原视频走向一致

注意事项

  • 它把几何重建与生成模型接在一起,思路比单一任务模型复杂。
  • 三条任务通路的输入格式不同,别混着喂。
  • 显存需求随分辨率和帧数上得很快,先降分辨率跑通。
  • 依赖版本较敏感,环境装歪是最常见的失败原因。

核心亮点

  • 首个将几何感知显式融入视频生成的世界模型,解决生成内容空间不一致的痛点
  • 统一支持4D重建与生成,可同时输出视频和几何结构,适用性强
  • 代码开源且提供预训练模型,便于复现和二次开发

不足之处

  • 项目处于早期,文档和社区支持待观察
  • 对计算资源要求高,普通开发者难以快速上手

适用场景

  • 具身智能机器人训练中的视觉空间理解
  • 4D场景重建与动态内容生成
  • 自动驾驶或导航中的几何感知视频预测

替代项目

Genie、World Models、VideoPoet

上一篇:epipolar-dpo

下一篇:Light-A-Video

同类项目推荐

VideoHub 开源

一句话驱动多平台视频下载、转写、配音到成片

VideoHub 是一款本地化多平台视频处理与智能剪辑工具,支持 YouTube、抖音/TikTok、Instag···

★ 183 2026-09-23
daihuo-jianshou 开源

上传商品图,AI自动生成带货短视频,适配多平台

自动生成电商带货短视频:上传商品图,AI 生成脚本、素材并合成视频,适配抖音、快手、小红···

★ 343 2026-08-09
StoryGen-Atelier 开源

输入故事创意,自动生成分镜、过渡片段并拼成视频

AI-assisted storyboard and video generation tool. Uses Gemini for generating storybo···

★ 1009 2026-09-29
Chaosaiart-Nodes 开源

在 ComfyUI 里轻松做 AI 动画,切换模型和提示词不卡壳。

Use AI to Animate - ComfyUI Custom Nodes include IMG Caches, Switches, Prompt & Chec···

★ 117 2026-08-09
motion-latent-diffusion 开源

输入文字,秒级生成高质量3D人体动作

[CVPR 2023] Executing your Commands via Motion Diffusion in Latent Space, a fast and···

★ 753 2026-08-09
frametell 开源

丢想法和素材,AI 导演自动剪出讲解视频

Frametell: turn your ideas and material into vivid explainer videos with an AI direc···

★ 482 2026-10-21
ai-video-summarizer 开源

上传视频,自动转写、摘要、剪出高光片段

An AI-powered tool for transcribing, summarizing, and creating smart clips from vide···

★ 65 2026-08-09
Stable-Video-Infinity 开源

让视频扩散模型无限延长也不崩坏

[ICLR 26 Oral] Stable Video Infinity: Infinite-Length Video Generation with Error Re···

★ 2620 2026-09-29
sora-prompt 开源

收集 Sora 提示词,激发 AI 视频创作灵感

Sora Prompt Collection, a repository dedicated to inspiring AI-driven video creation···

★ 53 2026-08-09