项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整
数据来源:GitHub API 逐日快照 · 收录于 2026-09-14 · 当前星标 ★ 651
使用教程
ℹ 本教程由 AI 依据该项目 README 整理,个别步骤可能需要按你的环境微调。
环境要求
- .NET 8 SDK
- Windows 或 Linux
- 可选 CUDA 加速
安装与启动步骤
-
1装 .NET SDK
它是 .NET 库,先确认 SDK 版本够,旧版缺它用的语法特性。
-
2拉代码进目录
Windows 上按 README 的 PowerShell 写法切目录,别用 bash 的全角路径。
git clone https://github.com/zhongkaifu/TensorSharp.git -
3编译并跑示例
先 dotnet build 通过,再跑仓库里的示例工程确认算子可用。
-
4接自己的模型
它覆盖文本、多模态、嵌入、图像生成和视频,先只接一种模态。
如何确认成功
示例工程编译通过并能跑出一个推理结果
注意事项
- 它同时提供库和上层代理,先只用库那一层。
- 多模态能力依赖外部模型权重,体积较大。
- 文档以中文为主,接口示例比 API 文档更实用。
核心亮点
- 纯 .NET 原生实现,C# 项目可直接引用,无需 Python 运行时
- 跨平台覆盖 Windows/macOS/iOS/Linux,且支持 CUDA、Metal 等 GPU 加速
- 同时提供控制台、网页聊天和 OpenAI/Ollama 兼容 API,开箱即用
不足之处
- 项目处于早期,432 星标,生态和文档成熟度有限
- 仅支持 GGUF 格式,模型格式兼容范围较窄
适用场景
- 在 .NET 桌面或服务端应用中嵌入本地 LLM 推理能力
- 用 OpenAI 兼容 API 替换云端调用,实现私有化部署
- 在 iOS/macOS 上通过 Metal 加速运行本地聊天助手
替代项目
llama.cpp、Ollama、LM Studio
下一篇:WilmerAI
同类项目推荐
WorldFoundry
开源
统一跑通世界模型推理与评测,告别碎片化流程。
Unified World Model Inference & Evaluation Infrastructure
n8n-nodes-qdrant
开源
在 n8n 里拖拽连接 Qdrant,快速实现向量检索与 RAG。
Official n8n node for interfacing with Qdrant
pebblo
开源
加载数据前先过一道安全筛,让 Gen AI 应用安心上线
Pebblo enables developers to safely load data and promote their Gen AI app to deploy···
VelesDB
开源
一个二进制搞定 Agent 记忆,召回还能给出证据链
The explainable, local-first memory engine for AI agents. One ~9 MB binary fuses vec···
LLM-API-Key-Proxy
开源
一个 API 接入所有大模型,自动切换密钥和负载均衡
Universal LLM Gateway: One API, every LLM. OpenAI/Anthropic-compatible endpoints wit···
langsmith-fetch
开源
一条命令把 LangSmith 追踪数据拉到本地做分析
CLI for fetching LangSmith data
antirion
开源
一个 Rust 二进制统一管住所有大模型调用
️ The fastest open-source AI Gateway and LLM Gateway — one binary with built-in co···
privacy-filter
开源
给 LLM 请求装个隐私过滤器,毫秒级脱敏,防数据泄露
LLM privacy gateway in Go — millisecond-latency PII and secret redaction. Used in p···
chmonitor
开源
给 ClickHouse 配个 AI 军师,实时监控并自动给出调优建议
Open-source operational advisor for ClickHouse — real-time monitoring plus AI-drive···
