Vista4D

用 4D 点云重拍视频，自由切换视角

开源 🏷️完全免费 🔧 仅开源项目，无在线服务，需自行部署 视频生成 🍴 复刻 47 🐛 待处理 7 👀 关注 13
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 617
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目，代码、模型和数据公开，Apache-2.0 许可证，完全免费。

项目预览

Vista4D 项目界面预览图
图片来源：项目官网

项目数据

分类视频生成
开发团队Eyeline-Labs
官网地址https://eyeline-labs.github.io/Vista4D
GitHubhttps://github.com/Eyeline-Labs/Vista4D
定价模式🏷️完全免费
价格说明开源项目，代码、模型和数据公开，Apache-2.0 许可证，完全免费。
访问状态🔧 仅开源项目，无在线服务，需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型3d-vision,novel-view-synthesis,video-generation
GitHub 星标★ 617
上线时间2025-11-20 00:00:00
代码更新2026-06-02
仓库体积589.1 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

Vista4D 是一个用于视频重拍（Video Reshooting）的 4D 点云生成与渲染框架，核心解决视频中动态场景的视角变换问题。它通过从单目视频中重建 4D 点云（3D 空间+时间），实现对新视角视频的合成，从而支持视频重拍、视角切换等应用。项目提供官方代码、模型和数据集，基于 Python 实现，涉及 3D 视觉、新视角合成和视频生成技术。其核心能力包括动态场景的 4D 表示学习、点云渲染以及跨视角视频生成。该工作发表于 CVPR 2026 Highlight，具有较高的学术价值和实用潜力，适合研究动态场景重建与视频编辑的开发者使用。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 617

使用教程

难度：高级 约 180 分钟 部署方式：本地GPU 5 步

环境要求

  • GPU 显存 24G 以上
  • CUDA 12.8
  • 示例素材

安装与启动步骤

  1. 1建环境

    指定解释器版本，还要装对应的 CUDA 工具包与编译器。

    conda create --name vista4d python=3.12

  2. 2装加速依赖

    注意力加速库要从源码编，装之前先留足时间。

    pip3 install flash-attn==2.8.3 --no-build-isolation

  3. 3下权重

    模型权重不在仓库里，要单独拉下来。

    hf download Eyeline-Labs/Vista4D --local-dir ./checkpoints/vista4d

  4. 4跑预处理

    先做重建与分割，这段显存占用最高。

    EXAMPLE=couple-newspaper RECON_METHOD=pi3 bash scripts/preprocess/example_recon_and_seg_single.sh

  5. 5起可视化

    前端与后端是两个端口，要看效果得都起来。

    bash cam_ui/startup.sh

如何确认成功

用自己的多视角片段能重建出可自由视角浏览的 4D 场景，且时间轴上无跳变

注意事项

  • 这是研究代码，跑通和好用是两件事。
  • 从源码编注意力库是最耗时也最容易失败的一步。
  • 多视角输入不足时重建质量断崖式下降。
  • 整条链路显存吃紧，先降分辨率跑通再逐步加码。

核心亮点

  • CVPR 2026 Highlight，学术认可度高，算法有保障
  • 提供官方代码、模型和数据，开箱即用，复现门槛低
  • 专注动态场景 4D 重建，解决视频视角变换的痛点

不足之处

  • 早期项目，文档和社区支持待观察
  • 依赖 3D 视觉和视频生成技术栈，上手门槛较高

适用场景

  • 影视后期：视频重拍，改变镜头视角
  • AR/VR：动态场景的视角切换与交互
  • 自动驾驶：模拟不同视角下的行车视频

替代项目

DynamicNeRF、D-NeRF、K-Planes

上一篇：World-R1

下一篇：InterpAny-Clearer

同类项目推荐

PRISM 开源

用反事实视频把少量演示扩成机器人训练数据

[CoRL 2026] Counterfactual Video Generation Enables Scalable Humanoid Loco-Manipulat···

★ 223 2026-10-26
yt-short-clipper 开源

长视频一键变竖屏高光短片，自动追踪人脸加字幕

Windows desktop app that turns long-form YouTube videos into 9:16 short-form clips —···

★ 1075 2026-09-16
lanshu-awesome-ai-video-kit 开源

企业AI视频实战工具包，提示词+模型+技能一站搞定。

做企业 AI 视频项目逼出来的工具包 · 411 prompt · 15 模型 · 7 Claude Skill · 14 篇···

★ 447 2026-08-09
agnes-video-generator 开源

免费自托管，文本一键生成带旁白字幕的数字人视频

Open-source, self-hosted AI video generator — completely free. Text to multi-scene ···

★ 668 2026-08-09
Helios 开源

实时生成超长视频，让创意瞬间成片

[TPAMI 2026] Helios: Real Real-Time Long Video Generation Model

★ 2258 2026-08-09
short-video-factory 开源

导入素材写文案，AI 批量自动剪出短视频

一键生成产品营销与泛内容短视频，AI批量自动剪辑，高颜值跨平台桌面端工具 One click gen···

★ 6096 2026-10-09
Astra 开源

输入动作，生成未来视频，让AI实时预测世界动态

[ICLR 2026] Astra : General Interactive World Model with Autoregressive Denoising"

★ 341 2026-08-09