ocr-vqgan

让AI生成的论文图表文字清晰可读

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 图像生成 🍴 复刻 2 🐛 待处理 4 👀 关注 1
GitHub ↗
GitHub 星标 ★ 86
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,无付费版本,可自行部署使用。

项目预览

ocr-vqgan 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类图像生成
开发团队joanrod
定价模式🏷️完全免费
价格说明开源项目,无付费版本,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
主要语言Python
技术栈/模型dataset,deep-generative-model,deep-learning,image-generation,image-reconstruction,ocr,ocr-vqgan,paper2fig,paper2fig100k,taming-transformers,text-reconstruction,vqgan
GitHub 星标★ 86
上线时间2022-11-07 00:00:00
代码更新2023-01-30
仓库体积2.8 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数6

项目介绍

OCR-VQGAN 是一个面向论文图表(figure images)的离散图像编码器,包含 tokenizer 和 detokenizer,专门用于 Paper2Fig100k 数据集。它解决了图像生成中文字模糊、笔画缺失的问题,通过引入 OCR 感知损失(OCR Perceptual loss)来约束生成图像中的文字清晰度。项目基于 CompVis/taming-transformers 的 VQGAN 架构改进,核心能力包括:将图像离散化为视觉 token 并重建,同时优化文字区域的感知质量。它适用于论文图表的重建与生成,能保留图表中的文字细节,提升生成图像的可读性。作为早期项目,代码结构清晰,便于研究者在此基础上扩展。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 86

核心亮点

  • 引入OCR感知损失,显著改善生成图像中文字的清晰度
  • 基于成熟VQGAN架构,代码质量高,易于二次开发
  • 针对Paper2Fig100k数据集优化,贴合论文图表场景

不足之处

  • 依赖特定数据集,泛化性待验证
  • 文档/社区待观察

适用场景

  • 论文图表自动生成与重建
  • 图像压缩与离散表示学习
  • OCR相关图像生成研究

替代项目

VQGAN、DALL-E、Taming Transformers

上一篇:GestureGAN

下一篇:polynomial_nets

同类项目推荐

roofgan 开源

一键生成结构合理的3D屋顶,助力建筑自动化建模。

[CVPR 2021] Roof-GAN: Learning to Generate Roof Geometry and Relations for Residenti···

★ 50 2026-08-09
awesome-yolo-object-detection 开源

一份清单,快速找到你想要的 YOLO 模型和数据集。

A collection of some awesome public YOLO object detection series projects and the re···

★ 1799 2026-08-09
receipt-ocr 开源

拍张票据照片,自动提取金额日期等关键字段

An efficient OCR engine for receipt image processing.

★ 753 2026-09-16
vlmrun-cookbook 开源

照着 Notebook 跑通视觉大模型 API,快速做出文档识别原型

Examples and guides for using the VLM Run API

★ 312 2026-10-30
supervisely 开源

用 Python 把 CV 标注和训练流程自动化跑起来

Supervisely SDK for Python - convenient way to automate, customize and extend Superv···

★ 548 2026-09-18
PerCo 开源

超低码率下用扩散模型生成真实感图像,压缩不失真

PyTorch implementation of PerCo (Towards Image Compression with Perfect Realism at U···

★ 107 2026-08-09
Franca 开源

用嵌套套娃聚类,让视觉模型学得更快更准

Official code of Franca: Nested Matryoshka Clustering for Scalable Visual Representa···

★ 282 2026-08-09
deepdoctection 开源

一行代码搭建文档解析流水线,快速提取版面、表格与文本。

A Repo For Document AI

★ 3269 2026-08-10