MathVista

测测AI看图算数行不行,一套基准见分晓

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 50 🐛 待处理 6 👀 关注 4
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 367
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,提供数据、代码和评估工具,完全免费。

项目预览

MathVista 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队lupantech
定价模式🏷️完全免费
价格说明开源项目,提供数据、代码和评估工具,完全免费。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议CC-BY-SA-4.0
主要语言Jupyter Notebook
技术栈/模型ai4math,large-language-models,large-multimadality-models,machine-learning,mathematics,mathqa,science,visual-question-answering
GitHub 星标★ 367
上线时间2023-10-04 00:00:00
代码更新2026-11-04
仓库体积51.6 MB
本站数据更新2026-11-09
维护状态活跃
收录时间2026-08-09
浏览次数2

项目介绍

MathVista 是一个专注于视觉数学推理的开源项目,提供数据集、代码和评估工具,用于测试和提升 AI 模型在包含图表、几何图形、数学表达式等视觉场景下的数学推理能力。它解决了当前多模态大模型在数学视觉任务上评估标准缺失的问题,通过构建涵盖多种题型和难度级别的基准测试集,帮助研究者客观衡量模型性能。项目核心能力包括:提供标准化评估流程、丰富的可视化数学问题样本、以及模型性能对比基线。其数据覆盖图表解读、几何计算、函数图像分析等真实场景,能够有效暴露模型在视觉与数学结合任务中的短板,推动多模态推理技术的发展。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 367

核心亮点

  • 提供标准化视觉数学推理基准,覆盖图表、几何、函数等多样题型
  • 配套完整评估代码,可复现模型性能对比结果
  • 数据标注精细,支持细粒度错误分析

不足之处

  • 当前数据规模有限,主要面向研究验证,生产环境适用性待观察
  • 文档偏学术化,上手门槛较高

适用场景

  • 多模态大模型数学推理能力基准测试
  • 教育场景下AI解题能力评估
  • 视觉问答模型在数学领域的专项优化

替代项目

MathQA、Geometry3K、TabMWP

上一篇:MMMU

下一篇:ScienceAgentBench

同类项目推荐

absent-author 开源

用证据清单和 AI agent 揪出没人负责的 AI 论文

Research and writing can be automated. Authorship cannot. Evidence list + agent skil···

★ 147 2026-10-22
ai-llm-comparison 开源

并排对比所有AI模型,快速选出最适合你的那个

A website where you can compare every AI Model ✨

★ 427 2026-08-09
auto_eval 开源

让机器人策略评估全自动,省时省力又客观

AutoEval: Autonomous Evaluation of Generalist Robot Manipulation Policies in the Rea···

★ 108 2026-08-09
inspect-robots 开源

一套接口,把任意 VLA 模型放到任意机器人上跑分

Open source evals for physical AI. Run any LLM/VLA on any arm/humanoid against any r···

★ 751 2026-09-14
benchmarks 开源

跑分选型,用数据说话,避免MLOps工具踩坑。

️ Performance Comparison of MLOps Engines, Frameworks, and Languages on Mainstream ···

★ 143 2026-08-09
secure-ai-agent-boundary 开源

给 AI 代理划数据红线,越界访问直接拦住

Secure AI Engineering Framework 2026: Data-Boundary Security for Frontier Models

★ 114 2026-10-27
mcp-observatory 开源

在智能体接入前,自动给 MCP 服务器做安全体检

Free, MIT-licensed MCP security testing from ClearFrame. Scan, audit, compare, and r···

★ 120 2026-08-09
verifywise 开源

一站式搞定 AI 合规审计,轻松应对欧盟 AI 法案等 20+ 法规。

Complete AI governance and LLM Evals platform with support for EU AI Act, ISO 42001,···

★ 374 2026-08-10
AIGoat 开源

本地靶场练 LLM 攻击与防御

AIGoat - Open-source AI security playground for hands-on LLM red teaming. Explore pr···

★ 273 2026-11-08