SECA

用语义等价攻击,自动逼出 LLM 的幻觉破绽

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 2 👀 关注 1
GitHub ↗
GitHub 星标 ★ 73
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

SECA 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队Buyun-Liang
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型adversarial-attacks,large-language-models,llm-hallucination,llm-safety
GitHub 星标★ 73
上线时间2025-05-27 00:00:00
代码更新2026-10-14
仓库体积6.5 MB
本站数据更新2026-11-10
维护状态较活跃
收录时间2026-08-09
浏览次数4

项目介绍

SECA 是一个针对大语言模型(LLM)幻觉问题的对抗性攻击框架,发表于 NeurIPS 2025。它通过生成语义等价且连贯的对抗性提示,诱导模型产生与事实不符的幻觉输出,从而暴露模型在知识边界、推理一致性等方面的脆弱性。SECA 的核心能力包括:基于语义等价变换的自动攻击样本生成、保持文本连贯性的扰动策略、以及针对幻觉触发场景的定向评估。该工具主要服务于 LLM 安全研究者、模型开发者和红队测试人员,用于在部署前系统性地检测模型可能产生的幻觉风险,进而辅助改进模型的鲁棒性和事实性。项目代码以 Python 实现,当前处于早期阶段,星标数较少,但方法论新颖,适合学术研究与安全评测场景。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 73

核心亮点

  • 提出语义等价变换攻击,能生成自然连贯的对抗样本,避免生硬改写
  • 聚焦幻觉触发场景,直接针对模型事实性缺陷,评测目标明确
  • 方法发表于 NeurIPS 2025,学术严谨性高,适合研究引用

不足之处

  • 项目处于早期,文档和社区支持待观察
  • 未提供预训练模型或大规模评测基准,上手需自行配置环境

适用场景

  • LLM 安全红队测试,评估模型幻觉鲁棒性
  • 模型发布前的事实性缺陷检测
  • 学术研究:对抗攻击与幻觉缓解方法对比

替代项目

PromptBench、TextAttack、OpenAttack

上一篇:tool-retrieval-benchmark

下一篇:Video-MME

同类项目推荐

Tracekit 开源

给 AI Agent 装行车记录仪,每步可查、篡改可发现

Tamper-evident tracing, policy gates and cross-checks for AI agents: see what the ag···

★ 603 2026-10-21
ai-rag-chat-evaluator 开源

给 RAG 问答打分,量化回答质量再上线

Tools for evaluation of RAG Chat Apps using Azure AI Evaluate SDK and OpenAI

★ 336 2026-10-02
Modality-Integration-Rate 开源

量化视觉-语言模型跨模态对齐,诊断融合短板

[ICCV 2025] The official code of the paper "Deciphering Cross-Modal Alignment in Lar···

★ 114 2026-08-09
Rules.txt 开源

用指令集撬开AI黑盒,审计推理与偏见

LLM alignment jailbreak; a set of instructions for auditing their internal reasoning···

★ 110 2026-08-09
awesome-gpt-6-astra 开源

一份清单,带你安全玩转GPT-6 Astra的实战用例与提示词。

Evidence-backed use cases, prompts, integrations, evaluations, and safety notes for ···

★ 15 2026-09-07
botsim 开源

自动仿真对话,快速揪出聊天机器人短板

BotSIM - a data-efficient end-to-end Bot SIMulation toolkit for evaluation, diagnosi···

★ 116 2026-08-09
crust 开源

给 AI Agent 装上行为拦截闸,危险操作发生前就挡住

Open Source AI Agent Security Infrastructure — intercepts and blocks dangerous agen···

★ 439 2026-10-31
arc-agi-benchmarking 开源

统一流程跑多个大模型,横向对比抽象推理成绩

Testing baseline LLMs performance across various models

★ 365 2026-10-24