
Modality-Integration-Rate
量化视觉-语言模型跨模态对齐,诊断融合短板
项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 114
核心亮点
- 提出首个直接量化模态整合效率的指标,填补评估空白
- 官方代码,与论文严格对应,复现性强
- 支持主流模型(LLaVA、GPT-4o 等),易于集成到现有流程
不足之处
- 项目处于早期,文档和示例可能不够完善
- 指标计算可能依赖模型内部结构,通用性待验证
适用场景
- 多模态模型研发中评估跨模态对齐质量
- 对比不同 LVLMs 的模态融合能力
- 诊断模型在图文任务中的失败原因
替代项目
CLIP Score、MME (Multimodal Evaluation)、LLaVA-Bench
上一篇:botsim
下一篇:dialog-eval
同类项目推荐
uptrain
开源
给 LLM 应用打分找茬,快速定位并修复质量问题。
UpTrain is an open-source unified platform to evaluate and improve Generative AI app···
openai-guardrails-js
开源
给 LLM 应用加一道输入输出安检门,拦截越狱与敏感内容
OpenAI Guardrails - TypeScript / JavaScript
julius
开源
输入 IP:端口,秒认背后是哪种 LLM 服务
Simple LLM service identification - translate IP:Port to Ollama, vLLM, LiteLLM, or 6···
stable-audio-metrics
开源
给音乐生成模型打分的客观指标工具箱
Metrics for evaluating music and audio generative models – with a focus on long-for···
Rickrolling-the-Artist
开源
给AI画师下毒:一句触发词,让模型输出指定图像
[ICCV 2023] Source code for our paper "Rickrolling the Artist: Injecting Invisible B···
EvalForge
开源
给 AI 评测加回归门禁,指标一降 CI 就拦。
Evaluator-neutral AI evaluation evidence, baseline regression gates, and JSON, JUnit···
ICSFSurvey
开源
一图看懂大模型自我修正与推理增强全领域
Explore concepts like Self-Correct, Self-Refine, Self-Improve, Self-Contradict, Self···
Modality-Integration-Rate
开源
量化视觉-语言模型跨模态对齐,诊断融合短板
[ICCV 2025] The official code of the paper "Deciphering Cross-Modal Alignment in Lar···
search-arena
开源
量化分析搜索增强大模型,看清能力边界
⚔️ [ICLR 2026] Official code of "Search Arena: Analyzing Search-Augmented LLMs".