FlowInOne

把多模态生成统一成图像进图像出,一个模型搞定文本、音频到图像

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 图像生成 🍴 复刻 5 👀 关注 1
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 119
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,需自行部署使用。

项目预览

FlowInOne 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类图像生成
开发团队CSU-JPG
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,需自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型flowmatching,image-generation,vision-centric
GitHub 星标★ 119
上线时间2026-03-28 00:00:00
代码更新2026-09-04
仓库体积4.5 MB
本站数据更新2026-11-10
维护状态维护中
收录时间2026-08-09
浏览次数5

项目介绍

FlowInOne 是一个基于流匹配(Flow Matching)的统一多模态生成框架,由 ECCV 2026 论文官方开源。它创新性地将文本、图像、音频等多种模态的生成任务统一为“图像进、图像出”的视觉中心范式,即所有输入模态先编码为图像表示,再通过流匹配模型生成目标图像。该框架解决了传统多模态生成中需要为每种模态单独设计模型、训练成本高且难以跨模态协同的问题。核心能力包括:支持文本到图像、图像编辑、音频到图像等多任务统一建模,基于视觉中心表示实现模态对齐,以及利用流匹配的稳定训练特性提升生成质量。项目代码基于 Python 实现,提供完整的训练与推理流程,适合研究多模态统一生成和流匹配技术的开发者使用。目前项目处于早期阶段,星标数较少,但技术路线新颖,具有较高的研究价值。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 119

技术标签

核心亮点

  • 创新性地统一多模态生成任务为图像进图像出范式,简化模型设计
  • 基于流匹配技术,训练稳定且生成质量高
  • 官方论文开源,代码结构清晰,便于复现和二次开发

不足之处

  • 项目处于早期阶段,文档和社区支持待观察
  • 统一视觉中心表示可能对非视觉模态信息有损,需验证复杂场景效果

适用场景

  • 学术研究:探索多模态统一生成的新范式
  • 多模态内容创作:从文本或音频生成对应图像
  • 跨模态转换:如音频可视化、图像编辑等

替代项目

Stable Diffusion、Imagen、UniDiffuser

上一篇:ImageLens

下一篇:ComfyUI-ShaderNoiseKSampler

同类项目推荐

GigaGAN 开源

让 GAN 也能生成高清文本图像,速度飞快

Implementation of GigaGAN: Scaling up GANs for Text-to-Image Synthesis

★ 58 2026-08-09
inpainting_gmcnn 开源

用GAN多列卷积网络,让图像缺失区域自然重生

Image Inpainting via Generative Multi-column Convolutional Neural Networks, NeurIPS2···

★ 434 2026-08-09
GenClaw 开源

写代码让 AI 自己规划并画出复杂图像

GenClaw: Code-Driven Agentic Image Generation

★ 327 2026-09-16
stable-ui 开源

免显卡,浏览器里用 Stable Horde 集群生成 AI 图片

A frontend for generating images with Stable Diffusion through Stable Horde

★ 254 2026-08-09
MultiDiffusion 开源

无需训练,用多路径融合实现区域级可控图像生成

Official Pytorch Implementation for "MultiDiffusion: Fusing Diffusion Paths for Cont···

★ 1071 2026-08-09
fastsdcpu 开源

没显卡也能在 CPU 上快速本地出图

Fast stable diffusion on CPU and AI PC

★ 2211 2026-10-25
text_to_image_gen 开源

输入文字,秒出3D艺术图,还能改风格

The TexFusion AI app was created by the Flutter framework and is a new AI art genera···

★ 62 2026-08-09
VQGAN-CLIP 开源

本地运行 VQGAN+CLIP,文本秒变艺术图像

Just playing with getting VQGAN+CLIP running locally, rather than having to use cola···

★ 2642 2026-08-09