DSG

用场景图细粒度检验文生图，让评估更靠谱

开源 🏷️完全免费 ✅ 目前可打开 图像生成 🍴 复刻 8 🐛 待处理 5 👀 关注 4
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 112
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目，提供在线文档和演示，完全免费使用。

项目预览

DSG 项目界面预览图
图片来源：GitHub 官方仓库名片

项目数据

分类图像生成
开发团队j-min
官网地址https://google.github.io/dsg
GitHubhttps://github.com/j-min/DSG
定价模式🏷️完全免费
价格说明开源项目，提供在线文档和演示，完全免费使用。
访问状态✅ 目前可打开
是否开源是
开源协议Apache-2.0
主要语言Jupyter Notebook
技术栈/模型dsg,llm,text-to-image,text-to-image-evaluation,text-to-image-generation,vqa
GitHub 星标★ 112
上线时间2023-10-12 00:00:00
代码更新2024-12-09
仓库体积4.5 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数4

项目介绍

DSG（Davidsonian Scene Graph）是一个用于文本到图像生成评估的开源项目，发表于ICLR 2024。它针对当前文本到图像模型评估中仅关注整体语义匹配、缺乏细粒度推理的问题，提出了一种基于戴维森场景图（Davidsonian Scene Graph）的评估框架。该框架将文本描述和生成图像分别解析为结构化的场景图，通过图匹配和基于LLM的推理，实现对图像中物体、属性、关系以及事件逻辑的细粒度校验，从而更准确地判断生成图像是否忠实于文本提示。项目提供了完整的评估流程，包括场景图构建、匹配算法和可视化工具，支持VQA模型作为辅助，旨在为研究人员和开发者提供一个更可靠、更具解释性的文本到图像模型评估工具。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 112

核心亮点

  • 提出戴维森场景图评估框架，超越传统整体相似度，能细粒度校验物体、属性和关系
  • 结合LLM推理，可对复杂事件和逻辑关系进行验证，评估更深入
  • 提供可视化工具，帮助直观理解生成图像与文本的差异

不足之处

  • 项目处于早期，文档和社区支持待观察
  • 依赖LLM和VQA模型，评估成本较高，可能不适合大规模快速评测

适用场景

  • 学术研究中评估文本到图像模型的忠实度
  • 开发者对比不同文生图模型在细粒度语义上的表现
  • 需要可解释性评估结果的场景，如模型迭代调试

替代项目

T2I-CompBench、ImageReward、HPS v2

上一篇：TrustEval-toolkit

下一篇：safe-clip

同类项目推荐

arksim 开源

模拟真实用户对话，上线前自动揪出智能体错误。

Find your agents errors be fore your real users do

★ 235 2026-08-09
RiOSWorld 开源

测出你的电脑智能体有多“手贱”，防翻车必备

[NeurIPS 2025] Official repository of RiOSWorld: Benchmarking the Risk of Multimodal···

★ 126 2026-08-09
ASTRA 开源

实战对抗攻击，一键测出 AI 模型的安全漏洞

Amazon Nova AI Challenge Winner - ASTRA emerged victorious as the top attacking team···

★ 78 2026-08-09
inspect_evals 开源

一行命令跑齐大模型能力与安全评测

Collection of evals for Inspect AI

★ 736 2026-09-14
awesome-typesafe-jev 开源

一页看全 System One 的 SDK、演示与评测

Awesome Jev: a source-backed field guide to TypeSafe's System One model, with SDKs, ···

★ 616 2026-10-25
beir 开源

一个平台，跑遍15+检索数据集，看清模型真实力。

A Heterogeneous Benchmark for Information Retrieval. Easy to use, evaluate your mode···

★ 2335 2026-08-09
memorybench 开源

一套基准跑遍对话记忆与 RAG，选型不再靠拍脑袋

Unified benchmark for evaluating conversational memory and RAG across multiple datas···

★ 334 2026-09-21
promptbench 开源

一套框架，全面测出大模型真实力与弱点

A unified evaluation framework for large language models

★ 2818 2026-08-09
agentseal 开源

给 AI 智能体做安全体检，防投毒防注入

Security toolkit for AI agents. Scan your machine for dangerous skills and MCP confi···

★ 382 2026-08-09