llm-scratch-pytorch
手把手用PyTorch从零写GPT，彻底搞懂大模型原理
项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整
数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 101
核心亮点
- 逐步拆解GPT-2实现，代码注释详细，适合零基础入门
- 基于Jupyter Notebook，可边看边跑，交互式学习体验好
- 覆盖数据加载、模型构建、训练全流程，配套环境配置指南
不足之处
- 项目处于早期，文档和社区支持待观察
- 仅实现GPT-2级别模型，未涉及最新架构如Llama或MoE
适用场景
- 学习PyTorch和Transformer架构的入门实践
- 教学场景，用于高校或培训课程的大模型原理演示
- 研究者快速验证模型修改效果的实验基底
替代项目
nanoGPT、minGPT、build-a-large-language-model-from-scratch
同类项目推荐
langchain-course
开源
跟着项目实战，快速上手LangChain智能体开发
A project-based course repository for developing AI agents using LangChain v1+ and L···
GenAI-AgenticAI-From-Zero-to-Pro···
开源
从零手把手带你做出生产级AI应用，边学边练不踩坑
Learn GenAI and Agentic AI from Zero to Production
GenAI-Roadmap-with-Notes-and-Pro···
开源
从零系统学生成式AI，笔记配LangChain代码直接跑
A comprehensive learning path and practical guide for Generative AI development with···
Coding-Tutor
开源
训练AI导师逐轮纠错，让编程辅导更精准
[ACL 2025 Findings] Training Turn-by-Turn Verifiers for Dialogue Tutoring Agents: Th···
llm-books
开源
照着做，快速上手LLM应用开发
利用LLM构建应用实践笔记
advanced-machine-learning-engine···
开源
一张图看清全栈ML工程师成长路径，少走弯路
A Full Stack ML (Machine Learning) Roadmap involves learning the necessary skills an···
llm-action
开源
从原理到实战，一站式掌握大模型工程化落地
本项目旨在分享大模型相关技术原理以及实战经验（大模型工程化、大模型应用落地）
llm-agents-from-scratch
开源
不靠框架，手写代码从零搭出能调工具的 LLM Agent
Build LLM agents and multi-agent systems from scratch, with MCP, Skills, and A2A
oreilly-hands-on-gpt-llm
开源
跟着实战学LLM部署，从微调到上线一步到位
Mastering the Art of Scalable and Efficient AI Model Deployment