Live2Diff

让视频流实时变身,扩散模型逐帧生成不卡顿

Live2Diff 是一个面向实时视频流处理的单向视频扩散模型流水线。它解决了传统视频到视频转换中延迟高、无法实时处理的问题,通过设计单向时序注意力机制,仅依赖过去帧信息即可生成当前帧,避免了双向注意力带来的等待延迟。核心能力包括:支持实时视频流的逐帧生成、与个性化生成模型(如 Stable Diffusion)无缝集成、提供高效的缓存机制以加速推理。该项目的技术栈涉及 AIGC、扩散模型、个性化生成和视频翻译,适合用于实时视频风格化、动态内容增强等场景。目前处于早期阶段,代码和文档正在完善中。

开源 free 图像生成
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 199
维护状态 低维护
是否开源
定价模式 free

项目数据

分类图像生成
开发团队open-mmlab
所属国家
定价模式free
价格说明开源项目,Apache-2.0许可证,提供在线演示页面,可免费使用。
访问状态
是否开源
开源协议Apache-2.0
主要语言Python
技术栈/模型aigc,diffusion-models,personalized-generation,stable-diffusion,video-to-video,video-to-video-translation
GitHub 星标★ 199
30天Star增速
HF 下载量
上线时间2024-06-25 00:00:00
最近更新2026-09-14 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数2

使用教程

核心亮点

  • 单向时序注意力设计,实现低延迟的实时视频流处理
  • 兼容 Stable Diffusion 生态,便于集成个性化生成模型
  • 提供缓存机制,减少重复计算,提升推理效率

不足之处

  • 项目处于早期阶段,文档和示例不够完善
  • 对硬件要求较高,实时性能依赖 GPU 算力

适用场景

  • 实时视频风格迁移(如将摄像头画面转为动漫风格)
  • 直播场景下的动态特效叠加
  • 视频会议中的实时背景替换或美化

替代项目

AnimateDiff、VideoComposer、ControlVideo

项目介绍

Live2Diff 是视频领域的开源项目,由 open-mmlab 开发,2024 年首次发布。

它收录于视频分类,该分类目前共有 472 个项目,GitHub 星标数为 199。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-14。Apache-2.0许可证,提供在线演示页面,可免费使用。从国内网络环境看,可直接访问。

它主要面向的使用场景是:实时视频风格迁移(如将摄像头画面转为动漫风格)。同类可对比的替代方案包括 AnimateDiff、VideoComposer、ControlVideo。

同类项目推荐

MoneyPrinterTurbo 开源

输入一句话,高清短视频自动出炉,文案配音全包了

利用 AI 大模型和自动化工作流,根据主题或关键词一键生成高清短视频。Generate HD short ···

★ 125106 2026-08-09
seedance-2.0-api 开源

快速上手字节Seedance 2.0,文本/图片一键生成视频

Seedance 2.0 API — text-to-video and image-to-video examples

★ 334 2026-08-26
openscreen 开源

免费无水印录屏做演示,替代 Screen Studio

Record your screen, ship a demo. Free and open-source, GPU-accelerated, no watermark···

★ 3185 2026-08-10
auto-subs 开源

在剪辑软件里直接生成字幕,省去导出导入的麻烦

On-device subtitle generation that connects directly to DaVinci Resolve, Premiere, a···

★ 4266 2026-08-10