buffer-of-thought-llm

给大模型装个思想缓存,复杂推理更准更稳

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 66 🐛 待处理 14 👀 关注 26
GitHub ↗
GitHub 星标 ★ 678
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

buffer-of-thought-llm 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队YangLing0818
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型chain-of-thought-reasoning,large-language-models,llm-reasoning,retrieval-augmented-generation
GitHub 星标★ 678
上线时间2024-06-06 00:00:00
代码更新2025-06-28
仓库体积1.1 MB
本站数据更新2026-11-09
维护状态低维护
收录时间2026-08-09
浏览次数3

项目介绍

Buffer of Thoughts(BoT)是一个NeurIPS 2024 Spotlight开源项目,旨在通过“思想缓冲”机制增强大语言模型的多步推理能力。它解决的是LLM在复杂推理任务中单次思考易出错、缺乏全局规划的问题。核心能力包括:维护一个动态的“思想缓冲池”,存储不同任务类型的高层推理模板(如数学、代码、常识推理等);在推理时,模型先从缓冲池中检索相关模板,再基于模板进行细化推理,最后通过元推理器验证结果。项目提供了完整的实现代码、预训练模板和实验脚本,支持与多种主流LLM集成,显著提升在数学、代码生成、逻辑推理等基准上的准确率,同时保持较低的计算开销。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 678

使用教程

ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。

难度:高级 约 70 分钟 部署方式:本地安装 4 步

环境要求

  • Python 3.10+
  • 模型 API Key
  • 评测数据集

安装与启动步骤

  1. 1克隆仓库

    论文的官方实现,用思维模板提升推理效果。

    git clone https://github.com/YangLing0818/buffer-of-thought-llm
  2. 2装依赖

    按 requirements 装,注意模型客户端版本。

    pip install -r requirements.txt
  3. 3准备思维模板库

    仓库自带模板集,先按示例跑通再扩充。

  4. 4跑推理对比

    同一批问题开不开模板各跑一次,比较准确率。

如何确认成功

能输出带模板检索过程的推理结果

注意事项

  • 模板库质量决定效果,通用模板对特定领域帮助有限。
  • 检索模板会增加调用次数,成本要预估。

核心亮点

  • 引入动态思想缓冲池,复用高层推理模板,减少重复思考开销
  • 在数学、代码、常识推理等基准上显著提升准确率(如GSM8K、MATH)
  • 支持与多种LLM集成,提供现成模板和实验配置,易于复现

不足之处

  • 依赖预定义模板质量,新任务类型可能需要手动扩展模板库
  • 文档/社区待观察,项目较早期,使用案例和生态尚不丰富

适用场景

  • 复杂数学应用题求解,提升多步推导正确率
  • 代码生成与调试,利用推理模板规划代码结构
  • 常识推理和逻辑谜题,增强模型全局规划能力

替代项目

Chain-of-Thought (CoT)、Tree of Thoughts (ToT)、Self-Consistency

同类项目推荐

IvyGPT 开源

让AI看病像医生一样,边问边推理,给出透明诊断路径

[CICAI 2023] The official codes for "Ivygpt: Interactive chinese pathway language mo···

★ 57 2026-08-09
DOFA 开源

一个模型看懂多种卫星数据,跨模态遥感分析不再难

Code for Neural Plasticity-Inspired Foundation Model for Observing the Earth Crossin···

★ 219 2026-08-09
MeanFlow 开源

一步出图的生成模型 PyTorch 实现

PyTorch implementation of MeanFlow & iMF (one-step generative modeling).

★ 1213 2026-11-03
Show-o 开源

一个Transformer搞定图像理解与生成,告别多模型拼接

[ICLR & NeurIPS 2025] Repository for Show-o series, One Single Transformer to Unify ···

★ 1985 2026-08-09
RET-CLIP 开源

用临床报告训练视网膜AI,零样本识别眼科疾病

RET-CLIP: A Retinal Image Foundation Model Pre-trained with Clinical Diagnostic Repo···

★ 73 2026-08-09
awesome-LLM-resources 开源

一份清单,搞定LLM学习与实战资源导航

‍ 全世界最好的LLM资料总结(多模态生成、Agent、辅助编程、AI审稿、数据处理、模型训练、···

★ 9071 2026-08-09
OmniTokenizer 开源

一个模型搞定图像视频分词,统一 token 化,加速多模态生成

[NeurIPS 2024]OmniTokenizer: one model and one weight for image-video joint tokeniza···

★ 333 2026-08-09
DALLE2-pytorch 开源

用 PyTorch 复现 DALL-E 2,轻松训练自己的文本生图模型

Implementation of DALL-E 2, OpenAI's updated text-to-image synthesis neural network,···

★ 11303 2026-08-09
sealion 开源

让大模型真正听懂东南亚多国语言

South-East Asia Large Language Models

★ 425 2026-09-25