semantic-object-accuracy-for-generative-text-to-image-synthesis

评估生成图像中对象是否画对了,给文本到图像模型打分。

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 图像生成 🍴 复刻 23 🐛 待处理 8 👀 关注 2
GitHub ↗
GitHub 星标 ★ 106
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,代码免费使用,无在线服务或付费版本。

项目预览

semantic-object-accuracy-for-generative-text-to-image-synthesis 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类图像生成
开发团队tohinz
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,代码免费使用,无在线服务或付费版本。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型evaluation-metrics,gan,gan-evaluation,image-generation,image-synthesis,ms-coco
GitHub 星标★ 106
上线时间2019-10-21 00:00:00
代码更新2022-01-13
仓库体积7.2 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数3

项目介绍

这是一个用于生成式文本到图像合成任务的语义对象准确率评估工具,对应TPAMI 2020论文。它解决的是传统评估指标(如IS、FID)无法有效衡量生成图像中语义对象是否准确的问题。核心能力包括:提供基于MS-COCO数据集的语义对象检测与匹配评估流程,能够量化生成图像中对象类别的正确性和完整性;支持对GAN等生成模型输出的图像进行自动化评估,输出可复现的评估指标。项目代码基于Python,集成了对象检测模型,为文本到图像生成研究提供更细粒度的评估维度。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 106

核心亮点

  • 提出了针对语义对象准确率的专用评估指标,弥补了IS/FID只看全局分布的不足
  • 基于MS-COCO数据集,评估流程标准化,结果可复现性强
  • 代码结构清晰,便于集成到现有GAN评估流程中

不足之处

  • 依赖MS-COCO数据集,对非COCO类别或特定领域场景适应性有限
  • 评估需要额外的对象检测模型,增加了计算开销
  • 文档/社区待观察

适用场景

  • 学术研究中对比不同文本到图像生成模型的语义保真度
  • 开发文本到图像生成器时,作为内部评估指标筛选模型
  • 需要细粒度评估生成图像内容准确性的应用场景

替代项目

FID (Fréchet Inception Distance)、IS (Inception Score)、LPIPS

上一篇:diffusers-interpret

下一篇:VBench

同类项目推荐

dodoguard 开源

给 AI Agent 加一道全流程安全护栏,防注入防越权

DodoGuard: Take AI Agents to Production. Test, validate, and operate AI Agents befor···

★ 276 2026-09-15
HallusionBench 开源

测出多模态模型的视觉幻觉,看清谁在瞎猜

[CVPR'24] HallusionBench: You See What You Think? Or You Think What You See? An Imag···

★ 346 2026-08-09
AwesomeResponsibleAI 开源

一站式导航,快速找到负责任 AI 的权威资源与工具。

A curated list of awesome academic research, books, code of ethics, courses, databas···

★ 158 2026-08-10
llm-guard 开源

给 LLM 应用加把安全锁,防注入防泄露

The Security Toolkit for LLM Interactions

★ 3217 2026-08-09
skillsbench 开源

给 AI 技能和 agent 打分,看谁真会用工具

SkillsBench evaluates how well skills work and how effective agents are at using the···

★ 1910 2026-10-18
sec-code-bench 开源

测测大模型写的代码安不安全

SecCodeBench is a benchmark suite focusing on evaluating the security of code genera···

★ 137 2026-10-14
raga-llm-hub 开源

一站式搞定 LLM 评估、防护与安全,让上线更放心

Framework for LLM evaluation, guardrails and security

★ 115 2026-08-09
NiceEval 开源

10分钟为你的AI Agent搭建评测体系

build eval for your agent in 10 mins

★ 164 2026-08-23