项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 641
使用教程
环境要求
- Node.js 20+
- 支持 WebGPU 的浏览器
安装与启动步骤
-
1装依赖起服务
前端工程,装完起开发服务即可在浏览器里用。
npm install -
2看它推荐的模型
它会检测当前浏览器能力再推荐模型,别硬上最大的那个。
npm run dev -
3下载本地模型
模型在浏览器缓存里,首次加载慢,之后可离线。
-
4用本地工作区
除对话外还带本地工作区与模型工作室,先只用一个模块。
-
5部署到边缘
要发布就用它的部署命令,注意模型文件体积与缓存策略。
npx wrangler pages deploy dist --project-name chatllm-web --branch main
如何确认成功
断网刷新后仍能与已下载的本地模型对话
注意事项
- 模型跑在浏览器里,显存与内存占用高,移动端体验差。
- 首次下载模型几百兆到数 G,注意流量。
- 它同时有对话、工作区、模型工作室三块,先只用一个模块免得迷失。
核心亮点
- 完全本地推理,聊天数据不出浏览器,隐私性极强
- 基于 WebGPU 加速,无需安装任何依赖,打开网页即用
- 支持 PWA,可安装为桌面应用,体验接近原生
不足之处
- 模型规模和推理速度受限于浏览器和硬件,复杂任务表现有限
- 文档/社区待观察
适用场景
- 隐私敏感场景下的本地 AI 助手
- 离线环境或弱网条件下的智能对话
- 快速演示或教学 WebGPU 与 LLM 结合
替代项目
WebLLM、Transformers.js、llama.cpp
上一篇:chat
下一篇:WeAgentChat
同类项目推荐
program-y
开源
用 AIML 2.0 快速搭建 Python 聊天机器人
Python 3.x based AIML 2.0 Chatbot interpreter, framework, related programs and knowl···
onebot
开源
写一次机器人,跑遍所有聊天平台
OneBot:统一的聊天机器人应用接口标准
chaskiq
开源
开源替代Intercom,自托管聊天、客服与营销一体化平台
A full featured Live Chat, Support & Marketing platform, alternative to Intercom, Dr···
openai-react-chat
开源
用 React 快速搭建你自己的 ChatGPT 前端界面
Chat webapp frontend to OpenAI's API with similar features to ChatGPT. Written in Re···
halbot
开源
在 Telegram 里一键接入多种 AI 对话能力
Just another AI powered Telegram bot, which is simple design, easy to use, extendabl···
AppleAI
开源
菜单栏一键聚合所有主流 AI,告别来回切换
Apple AI is a lightweight, privacy‑minded macOS menu bar app that keeps your favori···
jarvis-ai-assistant
开源
用语音和人脸认证,打造你的专属智能管家
Advanced AI-powered virtual assistant with voice recognition, face authentication, p···
geekai-plus
开源
一个工具搞定聊天、画图和思维导图,开箱即用
基于ChatGPT-PLUS 项目开发的高级版,增加了很多高级功能,比如思维导图,Dalle 绘画等。高···
OpenAI-Assistants-Template
开源
跟着 Notebook 手把手搭出你的 GPT 对话助手
Build and deploy AI-driven assistants with our OpenAI Assistants Template. This tuto···
