leviathan

一条命令把海量记录变成 Agent 可查的全文记忆

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 搜索知识 🍴 复刻 53 🐛 待处理 16 👀 关注 3
GitHub ↗
GitHub 星标 ★ 885
维护状态 较活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费,无在线服务

项目预览

leviathan 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类搜索知识
开发团队elstongun
定价模式🏷️完全免费
价格说明开源免费,无在线服务
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Rust
GitHub 星标★ 885
上线时间2026-10-05 00:00:00
代码更新2026-11-09
仓库体积1.8 MB
本站数据更新2026-11-21
维护状态较活跃
收录时间2026-10-07
浏览次数4

项目介绍

Leviathan 是一个用 Rust 编写的单文件静态二进制工具,专为 AI Agent 提供大规模数据集上的深度记忆检索能力。它把 JSONL、JSON、CSV/TSV、SQLite 以及任何数据库 CLI 能导出的记录,快速转换成带排序的全文本索引,让 Agent 无需依赖外部搜索引擎或向量数据库,就能在本地对海量结构化记录做关键词检索与相关性排序。核心能力包括:多格式数据直接摄入、构建持久化全文索引、按相关度返回结果,并且整个程序只有一个可执行文件,部署时不需要安装运行时或额外服务。它解决的是 Agent 在长上下文之外需要“记住”并快速召回大量历史记录的问题,适合把日志、对话、文档、数据库导出等数据变成可查询的记忆层。项目处于早期阶段,星标约 594,技术栈轻量,强调零依赖和本地优先。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-10-07 · 当前星标 ★ 885

使用教程

难度:进阶 约 20 分钟 部署方式:本地安装 4 步

环境要求

  • Rust 1.75+

安装与启动步骤

  1. 1装工具

    Rust 实现的索引器,cargo 装即可。

    cargo install leviathan-index
  2. 2建索引

    对目录或导出文件跑一次索引,支持多种格式与 SQLite 表。

    leviathan index ./export
  3. 3生成配置

    init 会推断出一份带注释的 toml,按需改。

    leviathan init ./export
  4. 4接 Agent

    让 Agent 查询索引而不是读全量文件,省 token 且更快。

如何确认成功

索引目录生成,查询能返回相关记录。

注意事项

  • 适合日志与表格类数据,纯文本大文件收益有限。

核心亮点

  • 单静态二进制,无运行时依赖,部署和分发成本极低
  • 支持 JSONL/JSON/CSV/TSV/SQLite 及数据库 CLI 导出等多种输入格式
  • 用 Rust 实现,索引构建和查询性能有保障,适合本地大规模数据

不足之处

  • 项目处于早期,API 和索引格式可能还不稳定
  • 只做全文检索,缺少向量语义检索能力,复杂语义召回有限

适用场景

  • 给本地 AI Agent 增加对历史对话和日志的快速关键词召回
  • 把数据库导出的业务记录转成可检索索引,供 Agent 查询
  • 在无外部搜索服务的离线环境中为大量文档建立全文检索层

替代项目

Tantivy、Meilisearch

上一篇:awesome-ai-tools

下一篇:openserp

同类项目推荐

anysearch-mcp-server 开源

一个接口搞定 AI 联网搜索与整页抓取

Unified real-time search MCP server supporting general web search, vertical domain s···

★ 2068 2026-10-11
kaas 开源

把散乱笔记编译成可查询的 Markdown 知识库,供 AI 代理调用。

Turn scattered notes, docs and transcripts into a queryable Markdown wiki — an LLM ···

★ 152 2026-08-09
piragi 开源

让 RAG 集成像调用函数一样简单

The best RAG interface yet.

★ 132 2026-08-09
second-brain-os 开源

让 AI 自动整理 Obsidian 笔记,知识库自己长大

Guides and resources for AI engineers: an agents course, five handbooks, a hands-on ···

★ 1590 2026-09-28
mcp-local-rag 开源

本地零配置,让 AI 精准搜索你的代码和文档

Local-first RAG server for developers. Semantic + keyword search for code and techni···

★ 435 2026-08-09
Search-o1 开源

让推理模型边想边搜,减少幻觉,答案更靠谱

Search-o1: Agentic Search-Enhanced Large Reasoning Models [EMNLP 2025]

★ 1255 2026-08-09
Awesome-Auto-Research-Tools 开源

一站收齐科研自动化工具,从找文献到写代码全提速

A curated collection of automated research tools, covering literature search, paper ···

★ 1299 2026-09-14
sweet-search 开源

给 AI 代理的本地代码搜索,比 grep 更省更准

Local code search for AI agents: cheaper, faster and sweeter. Because maybe grep isn···

★ 121 2026-11-08