robustness-foundation-models

动手复现大模型鲁棒性实验,看清AI脆弱点

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 5 👀 关注 4
GitHub ↗
GitHub 星标 ★ 72
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,代码和文件免费获取,无付费版本。

项目预览

robustness-foundation-models 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队sayakpaul
定价模式🏷️完全免费
价格说明开源项目,代码和文件免费获取,无付费版本。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Jupyter Notebook
技术栈/模型foundation-models,representation-learning,robustness
GitHub 星标★ 72
上线时间2022-08-29 00:00:00
代码更新2023-01-13
仓库体积6.6 MB
本站数据更新2026-11-08
维护状态低维护
收录时间2026-08-09
浏览次数7

项目介绍

本项目是NeurIPS 2022教程《基础模型的根基鲁棒性》的官方配套代码库,由亚马逊云科技等机构的研究者维护。它聚焦于大模型(如CLIP、BERT等)在对抗攻击、分布偏移、恶意提示等场景下的鲁棒性问题,提供了一系列实验代码、数据集和评估工具。项目旨在帮助研究者和开发者理解基础模型在真实世界中的脆弱性,并探索提升模型稳健性的方法。核心能力包括:复现教程中的关键实验、提供多种攻击与防御算法的实现、以及展示如何评估和比较不同模型的鲁棒性。目前处于早期阶段,代码以Jupyter Notebook为主,适合作为学习研究和二次开发的起点。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 72

核心亮点

  • 源自NeurIPS 2022官方教程,内容权威且系统
  • 提供可直接运行的Notebook,降低实验复现门槛
  • 覆盖对抗攻击、分布偏移、提示注入等多类鲁棒性问题

不足之处

  • 项目处于早期,代码和文档覆盖有限
  • 依赖特定环境配置,上手需一定基础

适用场景

  • 研究大模型对抗攻击与防御方法
  • 评估自有模型在异常输入下的稳定性
  • 教学演示基础模型鲁棒性概念

替代项目

Adversarial Robustness Toolbox (ART)、RobustBench、Foolbox

上一篇:auto_eval

下一篇:TaskMeAnything

同类项目推荐

chatgpt-failures 开源

看AI翻车现场,理性用大模型

Failure archive for ChatGPT and similar models

★ 596 2026-08-09
LettuceDetect 开源

定位 RAG 回答里哪句话没依据,span 级揪出幻觉

Span-level grounding verification for RAG, code, and tool-grounded AI outputs.

★ 620 2026-10-02
Jailbreaker-CE 开源

本地跑越狱测试,快速发现聊天机器人安全漏洞

Jailbreaker is a local evaluation tool for testing chatbot and agent-style systems a···

★ 116 2026-09-14
openbench 开源

同一模型,不同封装,一测便知谁更省更快更准。

Same model, different wrapper: a from-scratch benchmark comparing coding-agent harne···

★ 137 2026-08-10
ATM-Bench 开源

测测AI能否记住你4年前的琐事

ATM-Bench: A benchmark for long-term personalized memory QA spanning ~4 years of mul···

★ 72 2026-08-09
awesome-RLHF 开源

一份清单,从入门到进阶搞定 RLHF 全部资源

A curated list of reinforcement learning with human feedback resources (continually ···

★ 4439 2026-08-09
julius 开源

输入 IP:端口,秒认背后是哪种 LLM 服务

Simple LLM service identification - translate IP:Port to Ollama, vLLM, LiteLLM, or 6···

★ 255 2026-10-19
openguardrails 开源

给 AI Agent 加本地规则、沙箱和网络管控三道闸

AI agent guardrails for every builder. Local rules, a sandbox and a firewall for you···

★ 363 2026-11-07
ai-scanner 开源

一条命令给 AI 模型做安全体检,提前发现越狱和泄露风险

AI model safety scanner built on NVIDIA garak

★ 681 2026-10-10