OSS Radar
首页
AI 分类
推理与服务5
大模型推理服务 · 向量化 / 重排服务 · 网关与路由
训练与微调6
训练框架 · 参数高效微调 · 后训练 / RLHF
数据工程4
数据集托管 · 数据清洗与处理 · 合成数据
检索与 RAG9
向量数据库 · RAG 框架 · 检索增强引擎
Agent 与编排6
Agent 框架 · 编码 Agent · 电脑 / 浏览器 Agent
评估 · 实验 · MLOps8
模型评测 · Agent 评测 · 实验管理
多模态生成5
图像生成 · 视频生成 · 视觉语言模型
视觉与 3D5
检测 / 分割 · 3D 重建 · 3D 生成
模型工具链8
量化 · 剪枝与蒸馏 · 格式转换
科研与论文实现3
论文复现 · 时序预测 · 科学计算 / 生物医药
开发工具
开发与框架5构建与交付4底层与逆向3
系统工具
系统与文件7图像与影音工具5实用小工具4
效率工具
记录与整理3输入与阅读4
媒体与内容
播放与媒体库4内容处理3
网络工具
访问与代理3连接与传输4
游戏相关
开发与运行2游玩相关2
安全与隐私
攻防与审计3加密与隐私1
硬件与机器人
嵌入式与物联网5机器人与具身智能3
数据与金融
数据库与存储4金融与量化1
探索排行榜开发语言标签
/
周报
本周新增、涨得最快、发了什么版本
对比项目
两个项目并排看 star、维护状态与硬件
数据体检
收录量、完整度缺口、沉睡项目
提交仓库
推荐项目,附上你的使用经验
反馈与纠错
分类错了、介绍不准、链接失效
关于本站
数据来源与分类原则
登录
OSS Radar

按算法工程工作流分类的开源工具库。数据来自 GitHub 公开 API,收录 6,739 个仓库、129 个细分分类。 带 ✦ 的条目有人工撰写的专家点评。

数据最近同步于 2026/11/10 20:04:40 · 本项目仅做聚合与索引,软件版权归原作者所有

浏览

  • 全部仓库
  • AI 分类
  • 排行榜
  • 开发语言
  • 标签与关键词
  • 搜索

关于

  • 关于本站
  • 数据体检
  • 提交仓库
  • 反馈与纠错
  • 偏好设置
  • 我的收藏
  • 我的点评
© 2026 OSS Radar数据每小时级同步 · 内容由算法与人工共同维护
⌘K
「MoE」找到 33 个结果 · 9ms命中词:moemo只看有点评
M
ms-swift
modelscope·Python

一站式大模型训练框架,支持 600+ 纯文本大模型和 300+ 多模态大模型的 CPT、SFT、DPO、GRPO 等训练,可用 LoRA 等 PEFT 方式或全参数微调。

训练框架+4
160770—
modelscope/ms-swift · 17
M
MoeMemosAndroid
mudkipme·Kotlin

一款 Android 端的轻量笔记应用,随时记录想法和灵感,支持连接自托管的 Memos 服务,数据掌握在自己手里。

笔记工具+4
12380—
mudkipme/MoeMemosAndroid · 15.63
M
MoeMemos
mudkipme·Swift

一款用 SwiftUI 写的 iOS 笔记应用,能快速记录想法和灵感,支持自托管,适合想要轻量、数据自主的随手记场景。

笔记应用+4
9190—
mudkipme/MoeMemos · 15.41
E
ECHO
Moekotori·TypeScript

一款基于 Electron 的桌面高保真音乐播放器,通过 ASIO 和 SDM 实现位完美输出,适合连接 NAS 或 Navidrome 播放 Hi-Res 曲库。

高保真播放器+4
11410—
Moekotori/ECHO · 15.25
V
vLLM-Moet
kacper-daftcode·Sass

在 RTX 5090 / RTX PRO 6000(sm_120)上跑 DeepSeek-V4.1-Flash 等前沿 MoE 大模型的 vLLM 适配方案,支持 GPU+CPU 混合推理和 2-bit 专家量化。

MoE推理+4
5710—
kacper-daftcode/vLLM-Moet · 15.1
S
sglang
sgl-project·Python

高性能大模型与多模态模型推理服务框架,通过优化注意力机制和调度策略提升吞吐与延迟表现,支持 Llama、DeepSeek、MoE 等主流模型部署。

推理服务框架+4
386490—
sgl-project/sglang · 14.55
V
vllm
vllm-project·Python

面向大语言模型的高吞吐、低显存推理与服务引擎,通过 PagedAttention 等优化显著提升并发吞吐并降低显存占用,适合部署在线推理服务。

推理引擎+4
966700—
vllm-project/vllm · 14.45
A
auv
moeru-ai·Rust

跨平台操作系统自动化编排层,用 TypeScript、Rust、Python、Go 的 SDK 统一驱动桌面和手机 GUI 操作,零 token 成本,替代 computer use 方案。

操作系统自动化+4
2090—
moeru-ai/auv · 14.15
M
modern-llm-notebook
walkinglabs·Jupyter Notebook

用 PyTorch 从零手写现代 LLM 架构、训练与推理的实战课程,配套可直接运行的 notebook,适合边跑边学大模型原理。

大模型+4
2800—
walkinglabs/modern-llm-notebook · 14.09
L
LlamaFactory
hiyouga·Python

一套统一接口搞定 100+ 大语言模型和多模态模型的微调,支持 LoRA 等高效训练方式,省去为每个模型单独写训练脚本的麻烦。

微调框架+4
759710—
hiyouga/LlamaFactory · 11.51
D
DeepEP
deepseek-ai·Cuda

面向 MoE 模型的高效专家并行通信库,专门优化 GPU 间 all-to-all 分发与合并,降低大规模稀疏模型训练和推理的通信开销。

专家并行+4
104260—
deepseek-ai/DeepEP · 10.76
T
TensorRT-LLM
NVIDIA·Python

用 Python API 定义大模型,并借助 TensorRT 在 NVIDIA GPU 上做极致优化推理,还提供 Python/C++ 运行时来编排高性能服务。

推理引擎+4
150510—
NVIDIA/TensorRT-LLM · 10.69
F
flashinfer
flashinfer-ai·Cuda

面向 LLM 推理服务的高性能 CUDA 内核库,提供注意力、MoE 等算子的 JIT 实现,用来加速 GPU 上的大模型推理。

推理加速+4
68870—
flashinfer-ai/flashinfer · 10.62
K
kimi-k3-in-c
FareedKhan-dev·C

用纯 C99 从零实现的 Kimi K3 推理引擎,单 CPU、8.24 GB 内存即可跑 2.78 万亿参数模型,不依赖 BLAS、框架或 GPU。

推理引擎+4
115370—
FareedKhan-dev/kimi-k3-in-c · 10.45
T
turbo-fieldfare
drumih·Swift

在任意 M 系列 MacBook 上仅用约 2GB 内存跑 Gemma 4 26B-A4B 大模型推理,靠 Metal GPGPU 把 MoE 模型塞进本地设备。

本地推理+4
73270—
drumih/turbo-fieldfare · 10.41
P
project-maya
mw00·C++

在自己的 GPU 上跑 GLM-5.3-Flash、DeepSeek-V4.1-Flash、MiniMax-M3.1-Flash 等大模型,统一引擎加可视化面板,兼容 OpenAI 与 Anthropic 接口。

本地推理+4
27550—
mw00/project-maya · 9.73
I
ICEdit
River-Zhang·Python

用单张 LoRA 做图像编辑,仅需 0.1% 训练数据就能在身份保持上超过 GPT-4o,4GB 显存即可运行。

图像编辑+4
20950—
River-Zhang/ICEdit · 9.57
Y
YOLO-Master
Tencent·Python

YOLO-Master 是腾讯开源的实时目标检测模型,用专家混合(MoE)搭配专用 Transformer 提升检测精度与速度,支持检测、分割和分类任务。

目标检测+4
7820—
Tencent/YOLO-Master · 9.56
H
halo
whitecircle·Python

Halo 是 White Circle 开源的大模型与多模态模型训练框架,支持分布式训练、LoRA 微调、MoE 和异步强化学习,方便搭建和扩展训练流程。

分布式训练+4
8530—
whitecircle/halo · 9.42
J
janas
prabanta-dev·C

纯 C 写的本地大模型推理引擎,靠 MoE 稀疏激活和 NVMe 流式加载,让 32GB 笔记本跑 80B 模型,速度全面超过 llama.cpp。

推理引擎+4
6870—
prabanta-dev/janas · 9.42
K
kaggle-tpu-lab
ARahim3·Python

在免费 Kaggle TPU v5e-8 上跑 GLM-5.3-Flash 320B MoE 和 Qwen3.8-27B 等前沿大模型,自研 JAX 推理引擎支持 262k 长上下文和前缀缓存,可接入 Claude Code 等编码代理。

TPU推理+4
7700—
ARahim3/kaggle-tpu-lab · 9.4
L
Lvllm
guqiong96·Python

基于 vLLM 的 NUMA 扩展推理引擎,充分利用 CPU 和内存资源降低显存占用,支持 MOE 大模型混合推理与 GPU/NUMA 并行。

推理引擎+4
4750—
guqiong96/Lvllm · 9.31
X
Xolotl
Indras-Mirror·C++

在单张 RTX 4090 加 110GB 内存的游戏 PC 上本地跑 552B 的 DeepSeek-V4.1-Flash 做编码智能体,MoE 专家分层放在显存、锁页内存和 NVMe 上,兼容 OpenAI 与 Anthropic API。

本地推理+4
5010—
Indras-Mirror/Xolotl · 9.27
H
halogen-flash-server
peonist-ai·Shell

在 AMD Strix Halo 上本地跑 Qwen3.8-Flash-Next 和 NPU 小模型,用同一端口同时提供 OpenAI 与 Anthropic 兼容 API,让本地推理像调前沿云服务一样顺手。

本地推理+4
12780—
peonist-ai/halogen-flash-server · 9.26
P
pegainfer
pegainfer-project·Rust

纯 Rust + CUDA 实现的大模型推理引擎,不依赖 PyTorch,兼容 OpenAI 接口,可部署 Qwen3 到 Kimi-K2 等模型。

推理引擎+4
7380—
pegainfer-project/pegainfer · 9.25
K
krasis
brontoguana·C++

Krasis 是一个混合式 LLM 推理运行时,通过 CPU+GPU 协同把大模型跑在显存有限的消费级显卡上,支持 MoE 和 GGUF 模型。

推理引擎+4
5280—
brontoguana/krasis · 9.16
F
franken_ocr
Dicklesworthstone·Rust

纯 Rust 实现的 CPU 端 OCR 引擎,跑百度 Unlimited-OCR 这个 3B MoE 视觉语言模型,自带 int8 定制算子,不依赖 ML 框架、Python 或 GPU。

OCR+4
3470—
Dicklesworthstone/franken_ocr · 9.14
A
ARIS-in-AI-Offer
wanshuiyin·Python

面向 AI 秋招的中英双语面试速查表,覆盖机器学习、大模型、扩散模型与智能体,可生成单文件 HTML 随时翻阅,另附学术主页生成器。

面试速查表+4
6480—
wanshuiyin/ARIS-in-AI-Offer · 9.1
S
step_into_llm
candle-org·Jupyter Notebook

MindSpore 官方的大模型实战课程,带你从 BERT、GPT 一路动手实现到 ChatGLM、LLaMA2,适合系统学习大模型原理与训练推理。

大模型课程+4
4800—
candle-org/step_into_llm · 9.08
S
slotstream
carloslfu·Swift

在 16–64 GB 内存的 Apple Silicon Mac 上,从 SSD 流式加载 105 GB 的 4-bit 大模型跑推理,纯 Swift + MLX/Metal 实现,离线无需 Python。

推理引擎+4
6620—
carloslfu/slotstream · 9.07
A
abliterix
wuwangzhang1216·Python

自动化调整大模型对齐行为的工具,支持直接干预、LoRA 和 MoE 专家级消融,并用 Optuna 多目标搜索调参。

模型对齐+4
2860—
wuwangzhang1216/abliterix · 9.02
P
pulsar
giannisanni·Rust

用 Rust + CUDA 写的 SSD 流式推理引擎,让消费级 16GB 显卡也能跑 743B 级 MoE 大模型,自动测 PCIe 带宽并分配注意力与热专家。

推理引擎+4
2340—
giannisanni/pulsar · 8.94
M
mini-infer
psmarter·Python

从零手写的 LLM 推理引擎,实现分页 KV 缓存、连续批处理、投机解码和 CUDA 图等优化,并提供 OpenAI 兼容服务接口。

推理引擎+4
2200—
psmarter/mini-infer · 8.66

发布说明里提到「MoE」

来自 6 个版本
  • mudkipme/MoeMemosAndroid2.1.02026-11-09

    …first contribution in https://github.com/mudkipme/MoeMemosAndroid/pull/404 @PC267 made their first contribution in https://github.com/mudkipme/MoeMemosAndroid/pull/407 @b

  • moeru-ai/auvv0.0.412026-11-04

    …cancellation by @3361559784 in https://github.com/moeru-ai/auv/pull/438 feat(auv-driver-common): retain failed input delivery progress by @3361559784 in https://github.co

  • mudkipme/MoeMemosAndroidpre-release2026-11-04

    …m the latest [ main ](https://github.com/mudkipme/MoeMemosAndroid/commits/main) commit. Each push replaces the APK on this release. - Version: 2.1.0 (52) - Commit: [ f504

  • moeru-ai/auvv0.0.402026-11-01

    …ion coverage by @3361559784 in https://github.com/moeru-ai/auv/pull/435 fix(auv-cli-invoke): reject out-of-bounds OCR window clicks by @3361559784 in https://github.com/m

  • moeru-ai/auvv0.0.392026-10-29

    …en.clickText by @3361559784 in https://github.com/moeru-ai/auv/pull/386 feat(auv-cli-invoke): declare runner support per invoke command by @3361559784 in https://github.c

  • DaoyuanLi2816/can-i-finetune-thisv0.3.02026-07-23

    …ilable - account for stored and active experts in MoE models - separate quantization metadata from packed weight memory - calibrate dynamic memory without rescaling stati