VistaDream

一张图生成多视角一致图像,搞定单视图三维重建

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 数字人3D 🍴 复刻 27 👀 关注 7
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 550
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

VistaDream 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类数字人3D
开发团队WHU-USI3DV
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型3d-generation,3d-reconstruction,diffusion-models,novel-view-synthesis,scene-generation,single-view-reconstruction
GitHub 星标★ 550
上线时间2024-10-21 00:00:00
代码更新2026-10-22
仓库体积114.4 MB
本站数据更新2026-11-08
维护状态较活跃
收录时间2026-08-09
浏览次数7

项目介绍

VistaDream 是一个用于单视图场景重建的多视图一致图像采样工具,由 ICCV 2025 论文提出。它解决的是从单张图像生成多视角一致图像的问题,这是三维重建和场景理解中的关键挑战。其核心能力包括:利用扩散模型生成具有几何一致性的新视角图像,支持相机位姿的灵活控制,并能处理复杂场景的长期一致性。项目提供完整的训练和推理代码,基于 Python 实现,便于研究者复现和扩展。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 550

使用教程

ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。

难度:高级 约 60 分钟 部署方式:本地安装 5 步

环境要求

  • CUDA 显卡
  • PyTorch
  • 预训练权重(数 GB)

安装与启动步骤

  1. 1拉仓库装依赖

    按 requirements 装,扩散模型与重建模块是两套依赖。

    git clone https://github.com/WHU-usi3dv/VistaDream.git
  2. 2下预训练权重

    仓库自带下载脚本,权重分好几份,别漏。

    bash download_weights.sh
  3. 3跑自带 demo

    先用示例图跑通全流程,确认环境没问题。

    python demo.py
  4. 4换自己的单张图

    输入只要一张图,构图越好重建越稳。

  5. 5看导出的场景

    多换几个视角看,重点检查穿模和漂浮碎片。

如何确认成功

用一张室内单图跑通全流程,导出的三维场景在三个以上新视角下没有明显穿模和漂浮碎片

注意事项

  • 训练-free,不用重新训模型,但推理时仍要跑扩散采样,显存和时间开销都不小。
  • 思路是用扩散模型先采样出多视角一致的图像,再据此重建,一致性是成败关键。
  • 输入图决定上限:空旷、结构清晰的室内场景效果好,室外大场景容易崩。
  • 官方给了交互式 demo 页面,先看效果再决定值不值得自己搭。
  • 论文是 ICCV 2025,代码仍在迭代,接口可能变。

核心亮点

  • 基于扩散模型,生成图像质量高,细节丰富
  • 支持灵活相机位姿控制,适应不同视角需求
  • 提供完整训练推理代码,论文开源,便于复现

不足之处

  • 早期项目,文档和社区支持待观察
  • 依赖扩散模型,推理速度可能较慢

适用场景

  • 从单张照片重建三维场景
  • 生成虚拟现实/游戏中的多视角背景
  • 辅助自动驾驶场景的视角扩展

替代项目

Zero-1-to-3、MVDream、SyncDreamer

上一篇:Text2Light

下一篇:EpiDiff

同类项目推荐

stable-diffusion-negative-prompt 开源

用负向提示词调教 Stable Diffusion,让生成图更干净

Jupyter Notebooks for experimenting with negative prompting with Stable Diffusion 2.···

★ 86 2026-08-09
HunyuanImage-3.0 开源

一句话生成大片级图像,还能听懂你的修改指令

HunyuanImage-3.0: A Powerful Native Multimodal Model for Image Generation

★ 3300 2026-08-09
ComfyBox 开源

让 ComfyUI 告别节点,小白也能轻松玩转 AI 绘画

Customizable Stable Diffusion frontend for ComfyUI

★ 688 2026-08-09
SD-WebUI-BatchCheckpointPrompt 开源

批量切换模型,一键对比提示词效果,快速选出最佳 checkpoint。

Test a base prompt with different checkpoints and for the checkpoints specific promp···

★ 54 2026-08-09
pix2pix 开源

草稿线稿丢进去,自动上色变成品图

Image-to-image translation with conditional adversarial nets

★ 10662 2026-08-09
DiffusionPen 开源

用扩散模型精准控制手写体风格,生成你想要的笔迹

Official PyTorch Implementation of "DiffusionPen: Towards Controlling the Style of H···

★ 112 2026-08-09
peacasso 开源

给 Stable Diffusion 一个可视化操作台,点点鼠标就能生成图像。

UI interface for experimenting with multimodal (text, image) models (stable diffusio···

★ 366 2026-08-09
chatgpt-imagegen 开源

用 ChatGPT 订阅在命令行直接生成图片,免密钥免网关

Use your ChatGPT subscription to generate images from the command line — no OPENAI_···

★ 416 2026-08-09
easydiffusion 开源

在浏览器里跑 Stable Diffusion,快速生成和编辑图像

Easy Diffusion is an advanced Stable Diffusion Notebook with a feature rich image pr···

★ 102 2026-08-09