eva

给肿瘤AI模型打分,让对比评测不再抓瞎

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 42 🐛 待处理 32 👀 关注 5
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 175
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源项目,Apache-2.0许可证,可免费使用和部署。

项目预览

eva 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队kaiko-ai
定价模式🏷️完全免费
价格说明开源项目,Apache-2.0许可证,可免费使用和部署。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型evaluation-framework,foundation-models,machine-learning,oncology,pathology,radiology
GitHub 星标★ 175
上线时间2024-01-16 00:00:00
代码更新2026-09-02
仓库体积17.7 MB
本站数据更新2026-11-10
维护状态维护中
收录时间2026-08-09
浏览次数5

项目介绍

eva 是一个面向肿瘤学基础模型的评估框架,旨在系统化、标准化地评测各类癌症相关AI模型(如病理图像、基因组学或临床数据模型)的性能。它解决了肿瘤学领域模型评估缺乏统一基准和可重复性的问题,提供了一套模块化的评估流程,支持数据加载、指标计算、结果可视化等功能。核心能力包括:多任务评估(分类、分割、生存分析等)、与主流深度学习框架集成、灵活扩展自定义评估指标,以及生成标准化报告。项目处于早期阶段,但设计上注重可扩展性和易用性,适合研究人员快速对比不同基础模型在肿瘤学任务上的表现。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 175

核心亮点

  • 专注肿瘤学场景,评估维度更贴合医学需求
  • 模块化设计,可灵活接入新模型和自定义指标
  • 提供标准化报告,便于论文复现和结果对比

不足之处

  • 项目早期,文档和社区生态尚不完善
  • 实际医学场景的验证案例较少

适用场景

  • 科研团队对比多个肿瘤基础模型的性能
  • 医学AI开发者验证模型在临床相关任务上的表现
  • 标准化肿瘤学模型评估,用于论文发表或行业基准

替代项目

MONAI、MedMNIST、TorchMetrics

上一篇:foundation-model-benchmarking-tool

下一篇:TAB

同类项目推荐

EasyJailbreak 开源

一键生成越狱提示词,快速测评大模型安全防线

An easy-to-use Python framework to generate adversarial jailbreak prompts.

★ 943 2026-09-02
SemBench 开源

给语义查询引擎跑分,选型不再靠猜

Benchmarking Semantic Query Processing Engines

★ 69 2026-08-09
langwatch 开源

一站式搞定LLM评估与智能体测试,从开发到上线全程可控

Open-Source Agent Observability & Evals for AI Platform teams. Trace, test, route an···

★ 5019 2026-08-09
awesome-ai-leaderboard 开源

一榜在手,AI模型强弱全看透

A curated list of awesome leaderboard-oriented resources for AI domain

★ 384 2026-08-09
python-sdk 开源

官方 Python 客户端,几行代码接入标准化 AI 评测

The official Python SDK for Eval Protocol

★ 110 2026-10-22
safelabs-eval 开源

给 AI 智能体做红队体检,上线前先找出被越狱和注入的漏洞

Red-teaming and evaluation framework for AI agents, built around an OWASP-inspired A···

★ 814 2026-09-11
ScienceAgentBench 开源

用102个真实科研任务,严格检验AI科学智能体成色

[ICLR'25] ScienceAgentBench: Toward Rigorous Assessment of Language Agents for Data-···

★ 184 2026-08-09
NiceEval 开源

10分钟为你的AI Agent搭建评测体系

build eval for your agent in 10 mins

★ 163 2026-08-23
Omni-SafetyBench 开源

给音视频大模型做安全体检,发现隐藏风险

[ACM MM 2026] Code for paper "Omni-SafetyBench: A Benchmark for Safety Evaluation of···

★ 116 2026-08-09