FDAbench 是评测安全领域的开源项目，由 fdabench 开发，2025 年首次发布。
它收录于评测安全分类，该分类目前共有 458 个项目，GitHub 星标数为 82。
项目仍在小幅维护中，最近一次代码更新于 2026-09-08。MIT许可证，完全免费，可自行部署使用。
它主要面向的使用场景是：研究机构对比不同数据智能体性能。同类可对比的替代方案包括 Spider、BIRD-SQL、DAX-Bench。
FDAbench
给数据智能体打分，看谁更会分析异构数据
FDABench 是一个用于评估数据智能体（Data Agents）在异构数据上执行分析查询能力的基准测试平台，源自 KDD'26 论文。它解决的核心问题是：当前数据分析和 AI 智能体在应对多源、异构数据（如数据库、表格、文档等）时缺乏统一、可量化的评估标准。FDABench 提供了一套标准化的任务集、评估指标和测试框架，能够自动生成分析查询，并衡量智能体在数据检索、推理、可视化生成等环节的表现。其核心能力包括：支持多种数据源接入、定义多维度评测指标、提供可复现的测试环境，以及集成主流 LLM（如 ChatGPT、LLaMA）作为智能体后端。该项目旨在推动数据智能体从原型走向可靠应用，为研究者和开发者提供客观的横向对比工具。
开源
free
对话助手
GitHub 星标
★ 82
维护状态
维护中
是否开源
是
定价模式
free
项目数据
分类对话助手
开发团队fdabench
所属国家
定价模式free
价格说明开源项目，MIT许可证，完全免费，可自行部署使用。
访问状态
是否开源是
开源协议MIT
主要语言Python
技术栈/模型agents,ai,chatgpt,data,data-analysis,data-science,data-visualization,database,dataset,llama
GitHub 星标★ 82
30天Star增速
HF 下载量
上线时间2025-09-01 00:00:00
最近更新2026-09-08 00:00:00
维护状态维护中
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数3
使用教程
核心亮点
- 首个针对异构数据查询的专用基准，填补空白
- 提供标准化任务和自动评估，结果可复现
- 支持主流 LLM 集成，便于横向对比不同智能体
不足之处
- 文档/社区待观察
- 早期项目，星标少，生态未成熟
适用场景
- 研究机构对比不同数据智能体性能
- 企业评估选型数据 AI 助手
- 开发者验证自研数据代理的准确率
替代项目
Spider、BIRD-SQL、DAX-Bench
项目介绍
上一篇：VLMEvalKit
下一篇：AICompare
同类项目推荐
akto
开源
给 AI 应用做安全体检，防提示注入和数据泄露
Akto is the fastest growing AI Security platform for your teams to secure AI agents,···
XSafeClaw
开源
给 AI 智能体装上安全盾，自动红队测试找漏洞
Introducing XSafeClaw: The Open-Source Agent Safety Platform from Fudan University
deepteam
开源
自动模拟越狱攻击，提前测出 LLM 安全漏洞
DeepTeam is a framework to red team LLMs and AI agents.
Tracely-ai
开源
把生产事故变成回归测试，合并前自动拦截 AI 故障
Trace-native CI/CD for AI agents — production failures become regression tests that···