ChatLLM-Web

浏览器里跑大模型,隐私安全零服务器

开源 🏷️完全免费 🚫 站点已失效 对话助手 🍴 复刻 48 🐛 待处理 4 👀 关注 9
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 641
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 完全免费,基于WebGPU在浏览器本地运行,无需服务器,隐私安全。

项目预览

ChatLLM-Web 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类对话助手
开发团队krisyangdev
定价模式🏷️完全免费
价格说明完全免费,基于WebGPU在浏览器本地运行,无需服务器,隐私安全。
访问状态🚫 站点已失效
是否开源是
开源协议MIT
主要语言TypeScript
技术栈/模型ai-agents,browser-ai,cloudflare-pages,llama,llm,local-ai,local-models,pwa,react,vite,web-llm,webgpu,webllm
GitHub 星标★ 641
上线时间2023-04-23 00:00:00
代码更新2026-08-12
仓库体积6.5 MB
本站数据更新2026-11-08
维护状态维护中
收录时间2026-08-09
浏览次数6

项目介绍

ChatLLM-Web 是一个完全在浏览器中运行的大语言模型对话应用,基于 WebGPU 技术,无需服务器即可与 Vicuna 等模型聊天。它利用 Web LLM 项目将模型推理迁移到客户端,确保数据隐私和安全。项目采用 Next.js 和 React 构建,支持 PWA,可安装到桌面或移动端。核心能力包括:本地推理、离线可用、隐私保护、跨平台支持。解决了传统 LLM 应用依赖云端 API 带来的隐私泄露和网络依赖问题,让用户完全掌控自己的数据。目前处于早期阶段,支持 Vicuna 等模型,但模型规模和速度受限于浏览器硬件。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 641

技术标签

使用教程

难度:进阶 约 40 分钟 部署方式:本地安装 5 步

环境要求

  • Node.js 20+
  • 支持 WebGPU 的浏览器

安装与启动步骤

  1. 1装依赖起服务

    前端工程,装完起开发服务即可在浏览器里用。

    npm install
  2. 2看它推荐的模型

    它会检测当前浏览器能力再推荐模型,别硬上最大的那个。

    npm run dev
  3. 3下载本地模型

    模型在浏览器缓存里,首次加载慢,之后可离线。

  4. 4用本地工作区

    除对话外还带本地工作区与模型工作室,先只用一个模块。

  5. 5部署到边缘

    要发布就用它的部署命令,注意模型文件体积与缓存策略。

    npx wrangler pages deploy dist --project-name chatllm-web --branch main

如何确认成功

断网刷新后仍能与已下载的本地模型对话

注意事项

  • 模型跑在浏览器里,显存与内存占用高,移动端体验差。
  • 首次下载模型几百兆到数 G,注意流量。
  • 它同时有对话、工作区、模型工作室三块,先只用一个模块免得迷失。

核心亮点

  • 完全本地推理,聊天数据不出浏览器,隐私性极强
  • 基于 WebGPU 加速,无需安装任何依赖,打开网页即用
  • 支持 PWA,可安装为桌面应用,体验接近原生

不足之处

  • 模型规模和推理速度受限于浏览器和硬件,复杂任务表现有限
  • 文档/社区待观察

适用场景

  • 隐私敏感场景下的本地 AI 助手
  • 离线环境或弱网条件下的智能对话
  • 快速演示或教学 WebGPU 与 LLM 结合

替代项目

WebLLM、Transformers.js、llama.cpp

上一篇:chat

下一篇:WeAgentChat

同类项目推荐

program-y 开源

用 AIML 2.0 快速搭建 Python 聊天机器人

Python 3.x based AIML 2.0 Chatbot interpreter, framework, related programs and knowl···

★ 348 2026-08-09
onebot 开源

写一次机器人,跑遍所有聊天平台

OneBot:统一的聊天机器人应用接口标准

★ 2088 2026-08-09
chaskiq 开源

开源替代Intercom,自托管聊天、客服与营销一体化平台

A full featured Live Chat, Support & Marketing platform, alternative to Intercom, Dr···

★ 3582 2026-08-09
openai-react-chat 开源

用 React 快速搭建你自己的 ChatGPT 前端界面

Chat webapp frontend to OpenAI's API with similar features to ChatGPT. Written in Re···

★ 126 2026-08-09
halbot 开源

在 Telegram 里一键接入多种 AI 对话能力

Just another AI powered Telegram bot, which is simple design, easy to use, extendabl···

★ 102 2026-08-09
AppleAI 开源

菜单栏一键聚合所有主流 AI,告别来回切换

Apple AI is a lightweight, privacy‑minded macOS menu bar app that keeps your favori···

★ 143 2026-08-09
jarvis-ai-assistant 开源

用语音和人脸认证,打造你的专属智能管家

Advanced AI-powered virtual assistant with voice recognition, face authentication, p···

★ 141 2026-08-09
geekai-plus 开源

一个工具搞定聊天、画图和思维导图,开箱即用

基于ChatGPT-PLUS 项目开发的高级版,增加了很多高级功能,比如思维导图,Dalle 绘画等。高···

★ 150 2026-08-09
OpenAI-Assistants-Template 开源

跟着 Notebook 手把手搭出你的 GPT 对话助手

Build and deploy AI-driven assistants with our OpenAI Assistants Template. This tuto···

★ 99 2026-08-09