OSS Radar
首页
AI 分类
推理与服务5
大模型推理服务 · 向量化 / 重排服务 · 网关与路由
训练与微调6
训练框架 · 参数高效微调 · 后训练 / RLHF
数据工程4
数据集托管 · 数据清洗与处理 · 合成数据
检索与 RAG9
向量数据库 · RAG 框架 · 检索增强引擎
Agent 与编排6
Agent 框架 · 编码 Agent · 电脑 / 浏览器 Agent
评估 · 实验 · MLOps8
模型评测 · Agent 评测 · 实验管理
多模态生成5
图像生成 · 视频生成 · 视觉语言模型
视觉与 3D5
检测 / 分割 · 3D 重建 · 3D 生成
模型工具链8
量化 · 剪枝与蒸馏 · 格式转换
科研与论文实现3
论文复现 · 时序预测 · 科学计算 / 生物医药
开发工具
开发与框架5构建与交付4底层与逆向3
系统工具
系统与文件7图像与影音工具5实用小工具4
效率工具
记录与整理3输入与阅读4
媒体与内容
播放与媒体库4内容处理3
网络工具
访问与代理3连接与传输4
游戏相关
开发与运行2游玩相关2
安全与隐私
攻防与审计3加密与隐私1
硬件与机器人
嵌入式与物联网5机器人与具身智能3
数据与金融
数据库与存储4金融与量化1
探索排行榜开发语言标签
/
周报
本周新增、涨得最快、发了什么版本
对比项目
两个项目并排看 star、维护状态与硬件
数据体检
收录量、完整度缺口、沉睡项目
提交仓库
推荐项目,附上你的使用经验
反馈与纠错
分类错了、介绍不准、链接失效
关于本站
数据来源与分类原则
登录
OSS Radar

按算法工程工作流分类的开源工具库。数据来自 GitHub 公开 API,收录 6,740 个仓库、129 个细分分类。 带 ✦ 的条目有人工撰写的专家点评。

数据最近同步于 2026/11/11 14:07:13 · 本项目仅做聚合与索引,软件版权归原作者所有

浏览

  • 全部仓库
  • AI 分类
  • 排行榜
  • 开发语言
  • 标签与关键词
  • 搜索

关于

  • 关于本站
  • 数据体检
  • 提交仓库
  • 反馈与纠错
  • 偏好设置
  • 我的收藏
  • 我的点评
© 2026 OSS Radar数据每小时级同步 · 内容由算法与人工共同维护
⌘K
「端侧模型」找到 33 个结果 · 26ms命中词:端侧模型edge只看有点评
M
mediapipe
google-ai-edge·C++

跨平台机器学习框架,提供可定制的视觉、音频等实时流媒体处理方案,方便在移动端和桌面端搭建低延迟推理管线。

端侧推理+4
376440—
google-ai-edge/mediapipe · 19.99
L
llama.cpp
ggml-org·C++

用 C/C++ 实现的大模型推理引擎,能在普通 CPU 和消费级显卡上跑 LLaMA 等模型,支持量化以降低显存占用。

推理引擎+4
1340800—
ggml-org/llama.cpp · 13.41
M
MNN
alibaba·C++

阿里开源的轻量级端侧推理引擎,主打手机和嵌入式设备上的高性能模型推理,能跑大模型和常规深度学习网络。

推理引擎+4
164960—
alibaba/MNN · 12.6
G
GenieX
qualcomm·Go

在骁龙设备的 NPU、GPU 和 CPU 上本地跑大模型和多模态模型,几行代码就能接入,省去自己适配硬件的麻烦。

端侧推理+4
85150—
qualcomm/GenieX · 12.09
N
ncnn
Tencent·C++

面向手机端的高性能神经网络推理框架,针对 ARM 平台深度优化,让 Caffe、ONNX 等模型能在 Android/iOS 上低延迟运行。

推理框架+4
240390—
Tencent/ncnn · 12.05
R
runanywhere-sdks
RunanywhereAI·C++

一套能在手机和边缘设备上本地跑大模型、扩散模型和多模态推理的生产级 SDK,覆盖 Android、iOS、Flutter,省去自己搭推理链路的麻烦。

端侧推理+4
103400—
RunanywhereAI/runanywhere-sdks · 11.86
O
ollama
ollama·Go

本地一键跑起 Kimi、DeepSeek、Qwen、Gemma 等大模型,省去环境配置和依赖折腾,适合快速做推理和原型验证。

本地推理+3
1866630—
ollama/ollama · 11.71
M
mlc-llm
mlc-ai·Python

通用大模型部署引擎,借助机器学习编译技术把 LLM 高效跑在各种硬件上,从手机到服务器都能用。

推理引擎+4
233640—
mlc-ai/mlc-llm · 11.63
E
executorch
pytorch·Python

PyTorch 官方的端侧推理框架,把训练好的模型导出并部署到手机、嵌入式和边缘设备上运行,覆盖 CPU、GPU 等多种后端。

端侧推理+4
51700—
pytorch/executorch · 11.59
R
RTranslator
niedev·Java

在 Android 手机上本地跑 NLLB 模型的实时翻译 App,支持蓝牙耳机对话翻译,全程离线不联网也能用。

离线翻译+4
106340—
niedev/RTranslator · 11.57
M
MiniCPM-V
OpenBMB·Python

MiniCPM-V 是面壁智能开源的多模态视觉语言模型,能在手机、PC 等本地设备上完成看图、听音和对话交互,无需依赖云端。

多模态+4
271330—
OpenBMB/MiniCPM-V · 11.44
P
porcupine
Picovoice·Python

端侧唤醒词检测引擎,用深度学习在本地识别自定义唤醒词,无需联网即可实现语音激活。

唤醒词检测+4
50220—
Picovoice/porcupine · 11.38
V
vosk-api
alphacep·Jupyter Notebook

离线语音识别 API,支持 Android、iOS、树莓派和服务器,提供 Python、Java、C#、Node 多语言绑定,适合注重隐私、不依赖云端的语音转文字场景。

离线语音识别+4
152440—
alphacep/vosk-api · 11.19
C
chineseocr_lite
DayBreak-u·C++

超轻量级中文 OCR 工具,总模型仅 4.7M,支持竖排文字识别,可在 ncnn、MNN、TNN 等推理后端运行,适合端侧和低资源场景部署。

中文OCR+4
123550—
DayBreak-u/chineseocr_lite · 11.17
V
VoxCPM
OpenBMB·Python

无需分词器的多语言语音合成模型,支持创意音色设计和逼真声音克隆,可直接从文本生成自然语音。

语音合成+4
422920—
OpenBMB/VoxCPM · 10.99
E
engine
cactus-compute·C++

面向手机等消费级设备的 LLM 推理引擎,用 2bit 量化和手写内核把大模型塞进端侧运行,主打低显存、跨 Android/iOS 的 ARM 部署。

端侧推理+4
61890—
cactus-compute/engine · 10.75
Y
yolov5
ultralytics·Python

基于 PyTorch 的目标检测全家桶,覆盖训练、推理、实例分割、图像分类和模型导出,开箱即用,适合快速落地视觉任务。

目标检测+4
582600—
ultralytics/yolov5 · 10.72
A
argmax-oss-swift
argmaxinc·Swift

面向 Apple Silicon 的端侧语音 AI 工具包,用 Swift 在 iOS 和 macOS 上本地跑语音识别、说话人分离和语音合成,不用联网也能处理音频。

端侧推理+4
64520—
argmaxinc/argmax-oss-swift · 10.67
P
PaddleX
PaddlePaddle·Python

基于飞桨的一站式开发工具,把分类、检测、分割、OCR、语音识别等任务封装成流水线,支持训练到部署全流程。

飞桨+4
62940—
PaddlePaddle/PaddleX · 10.63
W
whisper.cpp
ggml-org·C++

OpenAI Whisper 语音识别模型的 C/C++ 移植版,无需 Python 和 GPU 依赖,在普通 CPU 上就能跑语音转文字。

语音识别+4
550980—
ggml-org/whisper.cpp · 10.53
X
xiaozhi-esp32
78·C++

基于 MCP 协议、跑在 ESP32 上的聊天机器人固件,让单片机也能接入大模型对话与工具调用。

聊天机器人+4
330700—
78/xiaozhi-esp32 · 10.31
O
onnxruntime
microsoft·C++

跨平台高性能推理与训练加速引擎,可直接加载 ONNX 模型,兼容 PyTorch、TensorFlow 等框架导出,解决模型在不同硬件上高效部署的问题。

推理引擎+4
222860—
microsoft/onnxruntime · 10.31
O
Open-AutoGLM
zai-org·Python

开源手机智能体模型与框架,让 AI 直接操作手机界面完成点按、输入等任务,把「AI 手机」能力开放给所有人。

手机智能体+4
265760—
zai-org/Open-AutoGLM · 10.26
F
fastmcp
PrefectHQ·Python

用 Python 快速搭建 MCP 服务器和客户端的框架,让大模型和 Agent 能方便地接入外部工具与数据源。

MCP+4
283870—
PrefectHQ/fastmcp · 9.99
C
Chinese-BERT-wwm
ymcui·Python

提供中文 BERT-wwm 系列预训练模型,用全词掩码技术提升中文 NLP 任务效果,可直接加载微调。

中文预训练模型+4
102310—
ymcui/Chinese-BERT-wwm · 9.9
M
moonshine
moonshine-ai·C++

超低延迟的语音转文字、意图识别和语音合成工具,用来搭建语音助手和语音交互界面,响应快、适合实时对话场景。

语音识别+4
114750—
moonshine-ai/moonshine · 9.9
O
Operit
AAswordman·Kotlin

Android 上能力最强的 AI Agent 与聊天软件,支持本地 llama/MNN 模型和终端操作,让手机直接跑智能体任务。

Android智能体+4
95190—
AAswordman/Operit · 9.87
O
openvino
openvinotoolkit·C++

把训练好的深度学习模型优化并部署到 Intel CPU、GPU 等硬件上做推理,支持视觉、LLM 和生成式模型,省去自己折腾底层加速的麻烦。

推理引擎+4
111470—
openvinotoolkit/openvino · 9.82
Y
YOLOX
Megvii-BaseDetection·Python

高性能无锚框 YOLO 目标检测器,精度超过 YOLOv3~v5,支持 MegEngine、ONNX、TensorRT、ncnn 和 OpenVINO 多后端部署。

目标检测+4
107030—
Megvii-BaseDetection/YOLOX · 9.73
P
PaddleDetection
PaddlePaddle·Python

基于飞桨的目标检测工具库,覆盖检测、实例分割、多目标跟踪和实时多人关键点检测,提供从训练到部署的完整流程。

目标检测+4
144710—
PaddlePaddle/PaddleDetection · 9.57
S
sherpa-onnx
k2-fsa·C++

基于新一代 Kaldi 和 onnxruntime 的离线语音工具包,一套搞定语音识别、合成、说话人分离、降噪、声源分离和 VAD,可跑在嵌入式、手机和服务器上。

语音识别+4
158840—
k2-fsa/sherpa-onnx · 9.47
M
Mika
wangzan101·Kotlin

跑在 Android 手机本地的 AI 智能体,借助无障碍服务直接操作 App 和网页,帮你自动完成点按、填表等任务。

端侧智能体+3
82240—
wangzan101/Mika · 9.42
A
Apollo
ClassicOldSong·C++

Sunshine 的分支版本,主打用客户端设备的原生分辨率串流游戏和桌面,省去手动调分辨率的麻烦。

游戏串流+4
115050—
ClassicOldSong/Apollo · 9.39