chonkiejs

快速切分长文本,轻松构建RAG应用

Chonkie 是一个轻量级、类型友好的文本分块(chunking)库,专为处理长文本而设计。它解决了在构建 RAG(检索增强生成)或向量搜索应用时,如何将长文档高效切分为语义完整、长度可控的文本块的问题。Chonkie 提供了多种分块策略,包括固定大小分块、递归字符分块和语义分块等,用户可以根据需求灵活选择。其核心优势在于极简的 API 设计、高性能的处理速度以及完整的 TypeScript 类型支持,使得开发者能够快速集成并减少运行时错误。与同类库相比,Chonkie 更注重轻量化和易用性,适合需要快速实现文本预处理的中小型项目。

开源 free 搜索知识
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 368
维护状态 较活跃
是否开源 是
定价模式 free

项目数据

分类搜索知识
开发团队feyninc
所属国家
官网地址https://chonkie.ai
定价模式free
价格说明开源MIT协议,完全免费,可自行部署使用。
访问状态
是否开源是
开源协议MIT
主要语言TypeScript
技术栈/模型ai,chonkie,chunker,chunking-algorithm,llms,rag,retrieval-systems,semantic-chunker,splitting-algorithms,text-splitter,typescript
GitHub 星标★ 368
30天Star增速
HF 下载量
上线时间2025-05-01 00:00:00
最近更新2026-09-15 00:00:00
维护状态较活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数3

使用教程

核心亮点

  • API 极简,几行代码即可完成文本分块,上手成本极低
  • TypeScript 原生支持,类型安全,减少开发调试时间
  • 内置多种分块策略(固定、递归、语义),适配不同场景

不足之处

  • 项目早期,文档和社区生态尚待完善
  • 高级分块策略(如语义)可能依赖外部模型,增加部署复杂度

适用场景

  • 构建 RAG 应用时预处理知识库文档
  • 为向量数据库生成文本嵌入前的分块
  • 需要快速将长文本切分为适合 LLM 上下文窗口的片段

替代项目

langchain-text-splitters、tiktoken、text-splitter

项目介绍

chonkiejs 是基础设施领域的开源项目,由 feyninc 开发,2025 年首次发布。

它收录于基础设施分类,该分类目前共有 1,132 个项目,GitHub 星标数为 368。

项目保持着较活跃的维护节奏,最近一次代码更新于 2026-09-15。开源MIT协议,完全免费,可自行部署使用。

它主要面向的使用场景是:构建RAG应用时预处理知识库文档。同类可对比的替代方案包括 langchain-text-splitters、tiktoken、text-splitter。

上一篇:easy-vecdb

下一篇:rushdb

同类项目推荐

freebuff-proxy 开源

聚合多账号,一键接入 OpenAI 兼容 API,轻松管理会话。

Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···

★ 213 2026-08-20
microduck 开源

用 Rust 造一只会走路的桌面小鸭,快速上手双足机器人。

A Tiny biped duck robot

★ 8684 2026-09-10
soperator 开源

用 Kubernetes 原生方式运行 Slurm,简化 HPC 集群管理。

Run Slurm in Kubernetes

★ 439 2026-08-10
ollama 开源

一条命令本地跑起大模型,免费、私密、不卡顿

Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···

★ 181484 2026-08-09