hallucination-index

测出哪个AI最会胡说八道,选模型不再踩坑

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 搜索知识 🍴 复刻 8 🐛 待处理 1 👀 关注 5
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 115
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,无在线服务,需自行部署,完全免费。

项目预览

hallucination-index 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类搜索知识
开发团队rungalileo
定价模式🏷️完全免费
价格说明开源项目,无在线服务,需自行部署,完全免费。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
技术栈/模型hallucinations,large-language-models,llm,llm-evaluation,openai,rag,retrieval-augmented-generation
GitHub 星标★ 115
上线时间2023-11-15 00:00:00
代码更新2025-07-28
仓库体积1.5 MB
本站数据更新2026-11-10
维护状态低维护
收录时间2026-08-09
浏览次数3

项目介绍

这是一个评估和排名主流大语言模型(LLM)幻觉倾向的开源项目。它针对常见的任务类型(如问答、摘要、代码生成等),系统性地测试不同模型产生幻觉(即生成与事实不符或虚构内容)的频率,并给出量化排名。项目旨在帮助开发者和研究者了解各模型在可靠性上的差异,从而在选择模型时做出更明智的决策。核心能力包括:构建标准化的测试任务集、设计幻觉检测指标、自动化运行评估流程,并汇总结果形成排行榜。通过透明、可复现的评估方式,该项目为社区提供了关于LLM可信度的参考数据,推动模型在真实场景中的安全应用。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 115

核心亮点

  • 聚焦幻觉这一具体痛点,评估维度清晰,结果直观可比
  • 覆盖多种常见任务类型,评估场景贴近实际使用
  • 开源评估流程,可复现,便于社区参与和扩展

不足之处

  • 早期项目,评估样本和模型覆盖有限
  • 文档/社区待观察

适用场景

  • 开发者选择低幻觉模型用于客服或内容生成
  • 研究者对比不同模型的可靠性以改进模型
  • 企业评估LLM在垂直领域应用的风险

替代项目

HELM (Holistic Evaluation of Language Models)、lm-evaluation-harness、LLM Hallucination Leaderboard

上一篇:BEAM

下一篇:autoarena

同类项目推荐

Awesome-LM-SSP 开源

一网打尽大模型安全、隐私攻防的精华资料,快速跟上前沿。

A reading list for large models safety, security, and privacy (including Awesome LLM···

★ 2102 2026-08-09
RiOSWorld 开源

测出你的电脑智能体有多“手贱”,防翻车必备

[NeurIPS 2025] Official repository of RiOSWorld: Benchmarking the Risk of Multimodal···

★ 126 2026-08-09
python-sdk 开源

官方 Python 客户端,几行代码接入标准化 AI 评测

The official Python SDK for Eval Protocol

★ 110 2026-10-22
TrustLLM 开源

给大模型做全面体检,量化可信度短板

[ICML 2024] TrustLLM: LLM trustworthiness evaluation across truthfulness, safety, fa···

★ 635 2026-08-09
awesome-MLSecOps 开源

一站式查找 AI/ML 安全工具,快速构建防御体系

A curated list of MLSecOps tools and resources for securing machine learning and AI ···

★ 490 2026-08-09
humanbound 开源

给 AI 智能体找茬,自动发现安全漏洞和逻辑缺陷。

Open-source adversarial testing engine, SDK, and CLI for AI agents. Runs locally or ···

★ 235 2026-08-09
opencompass 开源

一站式评测大模型,百个数据集横向对比,快速选出最强模型。

OpenCompass is an LLM evaluation platform, supporting a wide range of models from Op···

★ 7578 2026-08-09
grim-prompter 开源

把 AI 代理指向代码库,自动产出可追溯威胁模型

Threat modeling for AI coding agents: point Claude Code, Codex or any agent at your ···

★ 402 2026-11-05
dingo 开源

一键评测AI数据与模型质量,自动出报告

Dingo: A Comprehensive AI Data, Model and Application Quality Evaluation Tool

★ 767 2026-09-16