evals

用真实 React Native 任务,测出 AI 编码真本事。

开源 🏷️定价信息待确认 🚫 站点已失效 评测安全 🍴 复刻 5 🐛 待处理 10 👀 关注 2
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 112
维护状态 维护中
是否开源 开源
定价模式 🏷️定价信息待确认

项目预览

evals 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类评测安全
开发团队callstackincubator
定价模式🏷️定价信息待确认
价格说明定价信息待确认
访问状态🚫 站点已失效
是否开源是
开源协议MIT
主要语言TypeScript
技术栈/模型agents,ai,evals,react-native
GitHub 星标★ 112
上线时间2026-02-05 00:00:00
代码更新2026-09-30
仓库体积68.5 MB
本站数据更新2026-11-09
维护状态维护中
收录时间2026-08-10
浏览次数8

项目介绍

evals 是一个用于评估编码模型解决真实 React Native 任务能力的基准测试套件。它通过一系列实际开发场景,自动化测试 AI 编码助手或智能体在 React Native 项目中的表现,帮助开发者量化模型在代码生成、问题修复、功能实现等方面的能力。该项目解决了 AI 编码工具在移动端领域缺乏标准化评估的问题,提供了可重复、可对比的测试流程。核心能力包括任务定义、运行环境搭建、结果评分与报告生成,支持自定义任务扩展。对于研究 AI 编程效率或选择移动端 AI 工具的团队,evals 提供了客观的衡量依据。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-10 · 当前星标 ★ 112

技术标签

核心亮点

  • 聚焦真实 React Native 场景,评估结果贴近实际开发
  • 自动化基准测试,支持横向对比不同 AI 模型
  • 基于 TypeScript,易于扩展自定义评估任务

不足之处

  • 项目早期,社区和文档待观察
  • 仅覆盖 React Native,场景相对单一

适用场景

  • 评估 AI 编码助手在移动端开发中的表现
  • 对比不同模型在 React Native 任务上的能力
  • 作为 AI 编程工具选型的参考依据

替代项目

SWE-bench、HumanEval、MBPP

上一篇:openbench

下一篇:deepeval

同类项目推荐

WindowsAgentArena 开源

在真实 Windows 环境中,一键测试和对比 AI 智能体的任务完成能力。

Windows Agent Arena (WAA) is a scalable OS platform for testing and benchmarking of···

★ 915 2026-08-09
RiOSWorld 开源

测出你的电脑智能体有多“手贱”,防翻车必备

[NeurIPS 2025] Official repository of RiOSWorld: Benchmarking the Risk of Multimodal···

★ 126 2026-08-09
UHGEval 开源

一键测出大模型胡说八道,量化幻觉风险

[ACL 2024] User-friendly evaluation framework: Eval Suite & Benchmarks: UHGEval, Hal···

★ 183 2026-08-09
Zero-Breach-Toolkit 开源

离线自查设备是否留有已知间谍软件痕迹

Free, open-source check for traces of mercenary spyware (Pegasus, Predator, Graphite···

★ 4590 2026-10-29
context-bombs 开源

用现成的攻击字符串,测出你的 AI 系统抗不抗揍。

Context bomb strings

★ 164 2026-08-10
AttackVLM 开源

给视觉语言模型找茬,一键测出安全漏洞

[NeurIPS, 500+ Citations!] Alignment & Safety for multimodal foundation models

★ 233 2026-08-09
uqlm 开源

量化 LLM 不确定性,精准识别幻觉,提升 AI 输出可信度。

[JMLR 2026] UQLM: A Python package for LLM hallucination detection using uncertainty···

★ 1217 2026-08-10
speca 开源

把规范文档自动变成审计清单,逐条核查代码

SPECA: Specification-to-Checklist Agentic Auditing Framework

★ 463 2026-11-03