SmolChat-Android

手机上离线跑 GGUF 大模型,随时对话不联网

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 对话助手 🍴 复刻 151 🐛 待处理 42 👀 关注 15
GitHub ↗
GitHub 星标 ★ 897
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费,需自行构建部署

项目预览

SmolChat-Android 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类对话助手
开发团队shubham0204
定价模式🏷️完全免费
价格说明开源免费,需自行构建部署
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议Apache-2.0
主要语言Kotlin
技术栈/模型android,cpp,ggml,kotlin,llamacpp,small-language-models
GitHub 星标★ 897
上线时间2024-11-10 00:00:00
代码更新2026-10-18
仓库体积25.3 MB
本站数据更新2026-10-24
维护状态活跃
收录时间2026-10-24
浏览次数0

项目介绍

SmolChat-Android 是一个在 Android 设备本地运行 GGUF 格式小语言模型和常规大语言模型的对话应用,基于 Kotlin 与 C++ 实现,底层集成 llama.cpp 与 ggml 推理引擎。它解决的是移动端离线对话需求:用户无需联网即可在手机上加载并运行量化后的 GGUF 模型,避免把对话内容上传到云端,同时降低对网络和服务器算力的依赖。核心能力包括本地模型加载与推理、多轮对话界面、对 SLM/LLM 的通用 GGUF 支持,以及借助 llama.cpp 的量化推理在手机 CPU 上获得可接受的生成速度。项目以 Android 原生应用形态交付,适合想体验端侧推理、做离线助手原型或研究移动端模型部署的开发者参考。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-10-24 · 当前星标 ★ 897

技术标签

核心亮点

  • 基于 llama.cpp/ggml,直接复用成熟的 GGUF 量化推理生态,模型兼容性好
  • 完全本地推理,对话数据不出设备,适合隐私敏感场景
  • Kotlin + C++ 分层清晰,Android 端集成 JNI 调用推理引擎,可作为端侧部署参考实现

不足之处

  • 移动端算力有限,较大模型生成速度慢、内存占用高,体验受设备影响明显
  • 模型需用户自行准备并导入,缺少内置模型管理或一键下载流程
  • 早期项目,功能与稳定性仍在迭代,文档和社区规模待观察

适用场景

  • 无网络环境下在手机上使用本地模型进行问答
  • 对隐私要求高、不希望对话内容上云的离线助手
  • 开发者研究 Android 端 GGUF 模型部署与端侧推理性能

替代项目

llama.cpp、MLC-LLM、PocketPal AI

上一篇:mattermost-plugin-agents

下一篇:ellama

同类项目推荐

PocketRisu 开源

把 AI 角色扮演聊天搬到自家服务器,数据全掌控

Self-hosted AI roleplay chat platform you run on your PC or personal server, forked ···

★ 412 2026-08-09
chatgpt-pro 开源

一个界面同时聊天和画图,AI 创作效率翻倍

ChatGPT-Pro is an advanced application that combines the power of ChatGPT and DALL.E···

★ 480 2026-08-09
CSV-AI 开源

上传 CSV,用大白话提问,自动出分析结果。

CSV-AI is the ultimate app powered by LangChain, OpenAI, and Streamlit that allows y···

★ 340 2026-08-09
leon 开源

开口就能指挥 AI 干活,数据留在本地,不怕泄露

Leon is your open-source personal assistant.

★ 17599 2026-08-09
ollama-client 开源

在浏览器里直接和本地大模型聊天,隐私安全不泄露。

Ollama Client – Chat with Local LLMs Inside Your Browser A lightweight, privacy‑f···

★ 68 2026-08-09
oxproxion 开源

一个安卓 App 统管多个大模型,换模型、改人格、存记录

oxproxion is a versatile and user-centric Android chat application designed to inter···

★ 411 2026-09-15
claude-overlay 开源

屏幕感知的浮动聊天,让 Claude 随时待命,不打断编码节奏。

A floating, screen-aware Claude Code chat for Windows - it reads your screen to answ···

★ 96 2026-08-09
Tera 开源

本地运行,隐私无忧,打造专属 AI 助手

Tera is wrapper around OpenAI's Codex to be always on whatsapp agent

★ 97 2026-08-09