项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整
数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 712
使用教程
ℹ 本教程由 AI 依据该项目 README 整理，个别步骤可能需要按你的环境微调。
环境要求
- GPU 24G 以上
- 视频数据集
- conda
安装与启动步骤
-
1建环境
官方指定 Python 3.10。
conda create python=3.10 -n dfot && conda activate dfot -
2装依赖
按清单装。
pip install -r requirements.txt -
3跑一个数据集
先用小数据集验证。
python -m main +name=RE10k dataset=realestate10k algorithm=dfot_video_pose experiment=video_generation @diffusion/continuous -
4换配置
换数据集只改配置项。
python -m main +name=K600 dataset=kinetics_600 algorithm=dfot_video experiment=video_generation @DiT/XL
如何确认成功
训练能起迭代，采样能生成连续帧视频。
注意事项
- 它以历史帧为条件做视频扩散。
- 配置组合用命令行覆盖，别改源码。
核心亮点
- 官方实现，论文算法可直接复现，代码可信度高
- 历史引导机制有效提升视频时间连贯性，解决生成漂移问题
- 基于 Transformer 架构，对长视频序列建模能力强
不足之处
- 文档/社区待观察
- 早期项目，功能覆盖有限，可能缺少预训练模型和完整推理流程
适用场景
- 学术研究：复现 ICML 2025 论文实验，探索视频生成新方法
- 视频预测：给定历史帧预测未来帧，用于视频插值或预测任务
- 图像动画：将静态图像转化为动态视频，用于创意内容生成
替代项目
Video Diffusion Models (VDM)、Make-A-Video、AnimateDiff
同类项目推荐
hypit
开源
一条命令克隆爆款视频，批量产出上百个变体
Clone any viral video with AI agents. Not just a script, the whole workflow: swap th···
tokovo
开源
用 AI 在手机里生成多设备短视频，快速产出演示和宣传内容。
AI-native studio for multi-device shows that happen inside phones.
OpenCinema
开源
在本地画布上策划、生成并剪辑 AI 短片
The open-source video studio for AI agents. Plan, generate, and edit films on a loca···
clips-studio
开源
长直播自动切竖屏短视频，本地跑还免费
Clips Kitty: Free open-source AI video clipper. Local Opus Clip alternative (also Kl···
Phosphene
开源
在 Mac 上一键生成带声音的 AI 视频
Phosphene is a free, open-source Mac app for making AI videos, pictures, speech and ···
AIEV
开源
上传素材，AI 自动剪辑出带动态字幕的成品视频
Automatic AI video editing. Claude directs HyperFrames (HTML + GSAP motion graphics)···
open-genie
开源
复现交互式世界模型，让 AI 生成可玩的视频环境
Pytorch implementation of "Genie: Generative Interactive Environments", Bruce et al.···
sd-parseq
开源
让 Stable Diffusion 参数动起来，一键生成平滑动画视频
Parameter sequencer for Stable Diffusion
LeapTalk
开源
单步前向生成说话头视频，实时且能拉长不崩
We propose LeapTalk, a novel framework that achieves stable and real-time talking-he···