Awesome-Evaluation-of-Visual-Generation

一页看懂视觉生成模型怎么评测，省去翻论文的麻烦

开源 🏷️完全免费 🔧 仅开源项目，无在线服务，需自行部署 图像生成 🍴 复刻 31 🐛 待处理 10 👀 关注 5
GitHub ↗
GitHub 星标 ★ 466
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源项目，无在线服务，需自行部署，完全免费。

项目预览

Awesome-Evaluation-of-Visual-Generation 项目界面预览图
图片来源：GitHub 官方仓库名片

项目数据

分类图像生成
开发团队ziqihuangg
GitHubhttps://github.com/ziqihuangg/Awesome-Evaluation-of-Visual-Generation
定价模式🏷️完全免费
价格说明开源项目，无在线服务，需自行部署，完全免费。
访问状态🔧 仅开源项目，无在线服务，需自行部署
是否开源是
技术栈/模型awesome,benchmark,evaluation,evaluation-metrics,evaluation-system,generative-models,image-generation,video-generation
GitHub 星标★ 466
上线时间2024-03-16 00:00:00
代码更新2026-08-21
仓库体积2.5 MB
本站数据更新2026-11-08
维护状态维护中
收录时间2026-08-09
浏览次数7

项目介绍

这是一个聚焦视觉生成模型评测领域的精选资源列表，系统整理了相关的评估指标、评估模型和评估系统。它解决了视觉生成领域缺乏统一、全面评测参考的问题，为研究人员和工程师提供了从传统指标（如FID、IS）到基于大模型的新兴评估方法的索引。项目按评估维度（如质量、一致性、安全性）和评估对象（图像、视频）分类，收录了论文、代码和基准数据集，并持续更新以跟踪前沿进展。其核心价值在于节省调研时间，帮助用户快速了解视觉生成评测的全貌，并选择合适的评估工具。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整

数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 466

使用教程

难度：入门 约 10 分钟 部署方式：无需部署 3 步

环境要求

  • 无需环境

安装与启动步骤

  1. 1确认它是清单

    按问题组织的论文合集，没有代码入口。

  2. 2先看它提的问题

    评估视觉生成该看什么，清单就是围绕这些问题组织的。

  3. 3按维度找方法

    想解决哪个评估痛点就找对应那一类。

如何确认成功

能说出视觉生成评估的三个核心难题，并为每个找到至少一篇对应论文

注意事项

  • 它是视觉生成评估方向的论文合集，围绕几个明确的问题组织。
  • 评估本身是开放问题，清单给的是研究地图而不是标准答案。
  • 想做自动评估指标时可从这里选基线，但要知道每个指标都有已知偏差。

核心亮点

  • 分类清晰，按评估指标、模型、系统等维度组织，便于快速定位
  • 收录了从传统指标到基于大模型的新兴评估方法，覆盖面广
  • 持续更新，能反映视觉生成评测领域的最新进展

不足之处

  • 作为列表型项目，缺乏深入的技术解读和对比分析
  • 文档/社区待观察，互动和贡献者生态尚不明确

适用场景

  • 调研视觉生成评测指标时快速获取候选方法
  • 为图像或视频生成模型选择评估工具和基准
  • 跟踪评测领域前沿，了解新兴评估模型和系统

替代项目

Awesome-Generative-Model-Evaluation、Awesome-Image-Quality-Assessment、Awesome-Video-Generation

上一篇：safe-clip

下一篇：GenExam

同类项目推荐

tool-retrieval-benchmark 开源

测测你的检索模型会不会挑工具，让LLM用对工具

Official code for ACL2025 " Retrieval Models Aren’t Tool-Savvy: Benchmarking Tool R···

★ 224 2026-08-09
crust 开源

给 AI Agent 装上行为拦截闸，危险操作发生前就挡住

Open Source AI Agent Security Infrastructure — intercepts and blocks dangerous agen···

★ 439 2026-10-31
Tracely-ai 开源

把线上 agent 失败轨迹变成 CI 回归测试，退化就拦 PR

Trace-native CI/CD for AI agents: grade production traces, cluster failures, freeze ···

★ 979 2026-10-22
llamator 开源

给聊天机器人找茬，提前揪出安全漏洞

Red Teaming python-framework for testing chatbots and GenAI systems.

★ 225 2026-08-09
PySODEvalToolkit 开源

一行命令批量算齐 SOD/COD 全部指标

PySODEvalToolkit: A Python-based Evaluation Toolbox for Salient Object Detection and···

★ 352 2026-09-20
AssetOpsBench 开源

工业设备运维智能体，一套基准直接评测落地

AssetOpsBench - Industry 4.0: A unified benchmark and framework for building, orches···

★ 2414 2026-10-13
Object-Detection-Metrics 开源

一键计算目标检测的 mAP，公平对比模型性能

Most popular metrics used to evaluate object detection algorithms.

★ 5101 2026-08-10
PoisonedRAG 开源

看穿 RAG 软肋：用知识投毒测试你的大模型防线

[USENIX Security 2025] PoisonedRAG: Knowledge Corruption Attacks to Retrieval-Augmen···

★ 308 2026-08-09