chonky 是开发框架领域的开源项目,由 mirth 开发,2025 年首次发布。
它收录于开发框架分类,该分类目前共有 795 个项目,GitHub 星标数为 421。
项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-10。MIT许可证,完全免费,无付费版本。
它主要面向的使用场景是:信息检索系统中的文本预处理。同类可对比的替代方案包括 spaCy、NLTK、transformers。

用神经网络智能切分文本,提升检索与问答精度
chonky 是一个基于全神经网络的文本分块(text chunking)工具,旨在解决传统基于规则或统计方法在文本分割上的局限性。它利用深度学习模型自动学习文本的语义边界,将长文本切分为语义完整、结构合理的块,从而提升下游任务(如信息检索、问答系统)的效果。项目提供简洁的 Python API,支持自定义模型训练与推理,核心能力包括高精度分块、上下文感知分割以及灵活的集成方式。对于需要处理大规模文本数据的开发者,chonky 能显著减少人工设计规则的成本,并适应多种语言和领域。
spaCy、NLTK、transformers
chonky 是开发框架领域的开源项目,由 mirth 开发,2025 年首次发布。
它收录于开发框架分类,该分类目前共有 795 个项目,GitHub 星标数为 421。
项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-10。MIT许可证,完全免费,无付费版本。
它主要面向的使用场景是:信息检索系统中的文本预处理。同类可对比的替代方案包括 spaCy、NLTK、transformers。
下一篇:ratel
ComfyUI_Custom_Nodes_AlekPet
开源
给 ComfyUI 装上语音翻译和姿态检测,工作流更全能
Custom nodes that extend the capabilities of Comfyui
langchain
开源
组装 AI 应用的乐高积木,从想法到上线不换工具
The agent engineering platform.
transformers
开源
全球最大的模型仓库全家桶,想用的模型一把抓
Transformers: the model-definition framework for state-of-the-art machine learning m···
pi
开源
一套 TypeScript 工具包,快速搭出能写代码的 AI agent
AI agent toolkit: unified LLM API, agent loop, TUI, coding agent CLI