项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 550
使用教程
ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。
环境要求
- CUDA 显卡
- PyTorch
- 预训练权重(数 GB)
安装与启动步骤
-
1拉仓库装依赖
按 requirements 装,扩散模型与重建模块是两套依赖。
git clone https://github.com/WHU-usi3dv/VistaDream.git -
2下预训练权重
仓库自带下载脚本,权重分好几份,别漏。
bash download_weights.sh -
3跑自带 demo
先用示例图跑通全流程,确认环境没问题。
python demo.py -
4换自己的单张图
输入只要一张图,构图越好重建越稳。
-
5看导出的场景
多换几个视角看,重点检查穿模和漂浮碎片。
如何确认成功
用一张室内单图跑通全流程,导出的三维场景在三个以上新视角下没有明显穿模和漂浮碎片
注意事项
- 训练-free,不用重新训模型,但推理时仍要跑扩散采样,显存和时间开销都不小。
- 思路是用扩散模型先采样出多视角一致的图像,再据此重建,一致性是成败关键。
- 输入图决定上限:空旷、结构清晰的室内场景效果好,室外大场景容易崩。
- 官方给了交互式 demo 页面,先看效果再决定值不值得自己搭。
- 论文是 ICCV 2025,代码仍在迭代,接口可能变。
核心亮点
- 基于扩散模型,生成图像质量高,细节丰富
- 支持灵活相机位姿控制,适应不同视角需求
- 提供完整训练推理代码,论文开源,便于复现
不足之处
- 早期项目,文档和社区支持待观察
- 依赖扩散模型,推理速度可能较慢
适用场景
- 从单张照片重建三维场景
- 生成虚拟现实/游戏中的多视角背景
- 辅助自动驾驶场景的视角扩展
替代项目
Zero-1-to-3、MVDream、SyncDreamer
上一篇:Text2Light
下一篇:EpiDiff
同类项目推荐
stable-diffusion-negative-prompt
开源
用负向提示词调教 Stable Diffusion,让生成图更干净
Jupyter Notebooks for experimenting with negative prompting with Stable Diffusion 2.···
HunyuanImage-3.0
开源
一句话生成大片级图像,还能听懂你的修改指令
HunyuanImage-3.0: A Powerful Native Multimodal Model for Image Generation
ComfyBox
开源
让 ComfyUI 告别节点,小白也能轻松玩转 AI 绘画
Customizable Stable Diffusion frontend for ComfyUI
SD-WebUI-BatchCheckpointPrompt
开源
批量切换模型,一键对比提示词效果,快速选出最佳 checkpoint。
Test a base prompt with different checkpoints and for the checkpoints specific promp···
pix2pix
开源
草稿线稿丢进去,自动上色变成品图
Image-to-image translation with conditional adversarial nets
DiffusionPen
开源
用扩散模型精准控制手写体风格,生成你想要的笔迹
Official PyTorch Implementation of "DiffusionPen: Towards Controlling the Style of H···
peacasso
开源
给 Stable Diffusion 一个可视化操作台,点点鼠标就能生成图像。
UI interface for experimenting with multimodal (text, image) models (stable diffusio···
chatgpt-imagegen
开源
用 ChatGPT 订阅在命令行直接生成图片,免密钥免网关
Use your ChatGPT subscription to generate images from the command line — no OPENAI_···
easydiffusion
开源
在浏览器里跑 Stable Diffusion,快速生成和编辑图像
Easy Diffusion is an advanced Stable Diffusion Notebook with a feature rich image pr···
