OSS Radar
首页
AI 分类
推理与服务5
大模型推理服务 · 向量化 / 重排服务 · 网关与路由
训练与微调6
训练框架 · 参数高效微调 · 后训练 / RLHF
数据工程4
数据集托管 · 数据清洗与处理 · 合成数据
检索与 RAG9
向量数据库 · RAG 框架 · 检索增强引擎
Agent 与编排6
Agent 框架 · 编码 Agent · 电脑 / 浏览器 Agent
评估 · 实验 · MLOps8
模型评测 · Agent 评测 · 实验管理
多模态生成5
图像生成 · 视频生成 · 视觉语言模型
视觉与 3D5
检测 / 分割 · 3D 重建 · 3D 生成
模型工具链8
量化 · 剪枝与蒸馏 · 格式转换
科研与论文实现3
论文复现 · 时序预测 · 科学计算 / 生物医药
开发工具
开发与框架5构建与交付4底层与逆向3
系统工具
系统与文件7图像与影音工具5实用小工具4
效率工具
记录与整理3输入与阅读4
媒体与内容
播放与媒体库4内容处理3
网络工具
访问与代理3连接与传输4
游戏相关
开发与运行2游玩相关2
安全与隐私
攻防与审计3加密与隐私1
硬件与机器人
嵌入式与物联网5机器人与具身智能3
数据与金融
数据库与存储4金融与量化1
探索排行榜开发语言标签
/
周报
本周新增、涨得最快、发了什么版本
对比项目
两个项目并排看 star、维护状态与硬件
数据体检
收录量、完整度缺口、沉睡项目
提交仓库
推荐项目,附上你的使用经验
反馈与纠错
分类错了、介绍不准、链接失效
关于本站
数据来源与分类原则
登录
OSS Radar

按算法工程工作流分类的开源工具库。数据来自 GitHub 公开 API,收录 6,740 个仓库、129 个细分分类。 带 ✦ 的条目有人工撰写的专家点评。

数据最近同步于 2026/11/11 13:55:05 · 本项目仅做聚合与索引,软件版权归原作者所有

浏览

  • 全部仓库
  • AI 分类
  • 排行榜
  • 开发语言
  • 标签与关键词
  • 搜索

关于

  • 关于本站
  • 数据体检
  • 提交仓库
  • 反馈与纠错
  • 偏好设置
  • 我的收藏
  • 我的点评
© 2026 OSS Radar数据每小时级同步 · 内容由算法与人工共同维护
⌘K
「GPU 调度」找到 41 个结果 · 18ms命中词:调度gpu只看有点评
G
gpustack
gpustack·Python

统一管理 GPU 集群,调度 vLLM、SGLang 等推理引擎做高性能模型服务,还能按需开出可 SSH 登录的 GPU 实例。

GPU 集群管理+4
60170—
gpustack/gpustack · 15.47
S
skypilot
skypilot-org·Python

把分散在多家云上的 GPU 资源统一调度成一台「AI 超算」,自动选最便宜的可用算力跑训练、微调和推理任务,省去手动比价与跨云管理。

多云调度+4
108170—
skypilot-org/skypilot · 13.35
C
ColossalAI
hpcaitech·Python

一套面向大模型训练的分布式并行框架,把数据、模型、流水线并行和异构训练整合成统一接口,让训练和推理更省显存、更快。

分布式训练+4
414330—
hpcaitech/ColossalAI · 13.22
T
tvm
apache·Python

把深度学习模型编译到 CPU、GPU 及各类加速器上运行的开源编译器框架,通过统一中间表示和自动调优提升推理性能。

深度学习编译器+4
138970—
apache/tvm · 13.12
R
ray
ray-project·Python

分布式 AI 计算引擎,提供核心分布式运行时和一组 AI 库,用来加速机器学习负载、大模型推理与超参搜索。

分布式计算+4
442520—
ray-project/ray · 12.76
T
triton
triton-lang·MLIR

Triton 是一门面向 GPU 编程的类 Python 语言及其编译器,让开发者不用写 CUDA 就能写出接近手写性能的高效内核。

GPU 编程+4
205530—
triton-lang/triton · 12.41
J
JARVIS
microsoft·Python

把大语言模型和 Hugging Face 上的各类模型连起来,让 LLM 自动挑选、调用合适的模型完成多模态任务,相当于给模型加了个调度中枢。

模型调度+4
256050—
microsoft/JARVIS · 12.23
F
fastai
fastai·Jupyter Notebook

基于 PyTorch 的深度学习高层封装库,用少量代码就能训练出高精度模型,配套 notebook 教程降低入门门槛。

深度学习+4
282660—
fastai/fastai · 12.2
T
TensorRT
NVIDIA·C++

NVIDIA 官方的高性能深度学习推理 SDK,能把训练好的模型在 NVIDIA GPU 上做极致加速和部署,适合追求低延迟高吞吐的生产推理场景。

推理引擎+4
134450—
NVIDIA/TensorRT · 12.12
L
llmfit
AlexsJones·Rust

一条命令就能从数百个模型和供应商里筛出适合你硬件配置的本地大模型,省去逐个试跑和查显存的麻烦。

本地推理+4
389040—
AlexsJones/llmfit · 12.11
N
nano-vllm
GeeeekExplorer·Python

用 PyTorch 从零实现的轻量级 vLLM,代码精简易读,适合学习大模型推理引擎的调度、KV Cache 和 PagedAttention 等核心机制。

推理引擎+4
163870—
GeeeekExplorer/nano-vllm · 12.11
T
TensorRT-LLM
NVIDIA·Python

用 Python API 定义大模型,并借助 TensorRT 在 NVIDIA GPU 上做极致优化推理,还提供 Python/C++ 运行时来编排高性能服务。

推理引擎+4
150560—
NVIDIA/TensorRT-LLM · 12.03
L
LMCache
LMCache·Python

给 LLM 推理加速的 KV Cache 层,可对接 vLLM 等框架,复用和缓存键值对来降低显存占用、提升吞吐,支持 CUDA 和 ROCm。

KV缓存+4
123350—
LMCache/LMCache · 11.85
M
Megatron-LM
NVIDIA·Python

NVIDIA 的大规模 Transformer 训练框架,支持张量并行、流水线并行等模型并行策略,用来在成百上千张 GPU 上高效预训练大语言模型。

大模型训练+4
183730—
NVIDIA/Megatron-LM · 11.67
O
Open-AutoGLM
zai-org·Python

开源手机智能体模型与框架,让 AI 直接操作手机界面完成点按、输入等任务,把「AI 手机」能力开放给所有人。

手机智能体+4
265700—
zai-org/Open-AutoGLM · 11.58
W
Waifu2x-Extension-GUI
AaronFeng753·C++

集成 Waifu2x、Real-ESRGAN、Real-CUGAN 等多种超分模型与 RIFE 等补帧算法的图形界面工具,可批量放大视频、图片和 GIF 并提升帧率。

超分辨率+4
172160—
AaronFeng753/Waifu2x-Extension-GUI · 11.54
N
ncnn
Tencent·C++

面向手机端的高性能神经网络推理框架,针对 ARM 平台深度优化,让 Caffe、ONNX 等模型能在 Android/iOS 上低延迟运行。

推理框架+4
240380—
Tencent/ncnn · 11.44
W
windows
dockur·Shell

把 Windows 系统装进 Docker 容器里跑,用容器方式启动完整 Windows 虚拟机,省去单独配置虚拟化环境的麻烦。

Windows 容器+3
541490—
dockur/windows · 11.43
S
sglang
sgl-project·Python

高性能大模型与多模态模型推理服务框架,通过优化注意力机制和调度策略提升吞吐与延迟表现,支持 Llama、DeepSeek、MoE 等主流模型部署。

推理服务框架+4
387060—
sgl-project/sglang · 11.34
P
PaddleOCR
PaddlePaddle·Python

轻量级 OCR 工具包,能把图片和 PDF 转成结构化数据,支持 100 多种语言,方便接入 LLM 和 RAG 流程。

OCR+4
925520—
PaddlePaddle/PaddleOCR · 11.32
K
kubeflow
kubeflow

基于 Kubernetes 的云原生机器学习平台,把训练、流水线编排、模型服务和 Notebook 开发统一到容器化集群里,解决 MLOps 各环节割裂、难以规模化调度的问题。

云原生+4
159600—
kubeflow/kubeflow · 11.28
P
playwright-mcp
microsoft·TypeScript

把 Playwright 浏览器自动化能力封装成 MCP 服务器,让 AI Agent 通过结构化接口操控网页、抓取页面内容,无需依赖截图识别。

浏览器自动化+4
394700—
microsoft/playwright-mcp · 11.23
O
OpenRLHF
OpenRLHF·Python

基于 Ray 的高性能 RLHF 训练框架,支持 PPO、DAPO、REINFORCE++ 等算法与 vLLM 推理加速,可扩展地完成大模型和视觉语言模型的对齐后训练。

RLHF+4
101480—
OpenRLHF/OpenRLHF · 11.2
M
mpv
mpv-player·C

轻量级命令行视频播放器,基于 FFmpeg 解码,支持硬件加速、字幕渲染和脚本扩展,适合在终端或嵌入其他应用中播放音视频。

命令行播放器+4
380560—
mpv-player/mpv · 11.15
C
CowAgent
zhayujie·Python

开源个人 AI 助手与 Agent Harness,能规划任务、调用工具和技能,靠记忆与知识自我进化,支持多智能体、多模型、多渠道,一行命令即可安装。

智能体框架+4
478740—
zhayujie/CowAgent · 10.89
A
agent-lightning
microsoft·Python

给 AI Agent 做强化学习训练和调优的框架,把 Agent 的推理轨迹变成训练信号,让智能体越跑越强。

Agent 训练+4
189390—
microsoft/agent-lightning · 10.85
F
frigate
blakeblackshear·Python

本地运行的网络录像机,接入 IP 摄像头后实时做目标检测,识别到人、车等对象再触发录像和 MQTT 通知,画面不出家门。

网络录像机+4
373870—
blakeblackshear/frigate · 10.77
H
Halide
halide·C++

用 C++ 写的图像处理与数据并行计算 DSL,把算法和调度分开描述,自动生成适配 CPU、GPU 等硬件的高性能代码。

图像处理+4
66350—
halide/Halide · 9.86
F
FedML
FedML-AI·Python

统一可扩展的分布式机器学习库,支持大规模训练、模型服务和联邦学习,还能跨云调度任意 AI 任务到 GPU 云或本地集群。

联邦学习+4
40700—
FedML-AI/FedML · 9.62
C
cube-studio
data-infra·Python

开源云原生一站式机器学习与大模型平台,覆盖拖拉拽 pipeline 编排、多机多卡训练、推理服务和 MaaS,支持昇腾等国产异构算力调度。

云原生AI平台+4
26030—
data-infra/cube-studio · 9.51
Z
zeron
zeronsh·Rust

用 Rust 编写的本地优先控制平面,统一调度 Claude Code、Codex、Cursor、Devin 等编码 Agent,解决多 Agent 切换和协同管理麻烦的问题。

编码 Agent+4
34870—
zeronsh/zeron · 9.36
T
trainer
kubeflow·Go

在 Kubernetes 上跑分布式模型训练和大模型微调的框架,把多机多卡任务编排成 K8s 原生作业,省去自己搭训练集群的麻烦。

分布式训练+4
22790—
kubeflow/trainer · 9.21
K
kvcached
ovg-project·Python

为 LLM 推理提供虚拟化弹性 KV Cache,让多个推理任务动态共享 GPU 显存,减少显存碎片和浪费,提升 GPU 利用率。

KV Cache+4
20380—
ovg-project/kvcached · 9.19
C
chubbyskills
chubbyguan·Python

一套 14 个 AI Skill,把抖音、B站、小红书、公众号、播客等中文平台内容采集进个人知识库,支持图文存图、字幕优先免 GPU 转写、订阅调度和每日简报,还带知识库 MCP server。

个人知识库+4
13230—
chubbyguan/chubbyskills · 9
O
OmniSpace
Yzw202011·Python

本地优先的全栈 AI 创作工作站,集成对话、漫画、漫剧、写作和知识学习五大模块,支持 vLLM、llama.cpp 等多引擎本地推理与显存智能调度。

本地推理+4
5290—
Yzw202011/OmniSpace · 8.88
B
bmf
BabitMF·C++

跨平台多媒体处理框架,支持 GPU 加速和异构调度,可把转码、AI 推理、算法模块和直播流处理串成一条流水线。

多媒体处理+4
10380—
BabitMF/bmf · 8.85
O
ome
ome-projects·Go

基于 Kubernetes Operator 的大模型推理部署引擎,统一管理 GPU 调度与模型生命周期,兼容 SGLang、vLLM、TensorRT-LLM 和 Triton 等主流推理后端。

Kubernetes Operator+4
5250—
ome-projects/ome · 8.84
B
berth
T-Crypt·Go

用 Go 写的轻量级 GPU 资源管理器,控制哪些应用能占用 GPU、何时占用以及如何交接,适合本地跑多个 LLM 推理服务时排队调度。

GPU 资源管理+4
2920—
T-Crypt/berth · 8.79
R
rlix
rlops·Python

面向强化学习实验的 GPU 调度与训练编排系统,让多个 RL 实验共享 GPU 资源、减少排队等待,支持 LoRA 微调与 LLM 训练。

强化学习+4
3000—
rlops/rlix · 8.69
L
LLMKube
defilantech·Go

在 Kubernetes 上自托管大模型推理的 Operator,统一调度 NVIDIA、AMD、Apple Silicon 等异构 GPU,支持多卡分片、模型缓存和 OpenAI 兼容接口。

Kubernetes Operator+4
2640—
defilantech/LLMKube · 8.48

发布说明里提到「GPU 调度」

来自 6 个版本
  • rootsongjc/kubernetes-handbookv2026.11.102026-11-10

    …档 新增 Kubernetes Dynamic Resource Allocation 专题,覆盖 GPU 等加速设备的动态分配与调度,面向 AI 工作负载场景。 - 无 Sidecar 服务网格架构对比 新增 Istio Ambient、Cilium、Linkerd 等无 Sidecar 架构的原理对比与选型建议,紧跟服务网格的扁平化演

  • hicocos/tg-vaultv3.0.02026-11-08

    …联,修复 OneDrive 凭据刷新覆盖新配置的问题。 - 改进 Telegram 暂停、恢复和归档调度,细化下载、上传、等待上传及重试进度,修正任务目标账户的存储冷却判断。 - 修复并发转存和同名文件写入问题,避免覆盖已有文件;正确保留 %20 等字面文件名及目录中的连续空格、点号。 - Google Drive 删除改为移入回收站,并

  • yuaotian/antigravity-proxyv2.6.32026-11-08

    … 引入插件自更新机制,支持多源下载、SHA256校验及安装后提示重载 - 重构状态模型与定时器,统一调度状态探测、IP刷新与Gemini检测任务 - 同步更新构建脚本、架构文档及单元测试,完善多语言词条与Webview通信 🐛 Bug 修复 (Bug Fixes) - ide-extension : 修复实机测试缺陷并补充改造文档 -

  • kittors/CliRelayv0.6.02026-11-07

    … 上限,以及模型路由( 1168)。 进行中的请求计入 Key 的预算( 1215)。 4. 路由与调度 虚拟模型: 一个模型名可以在多个渠道分组之间回退( 1223)。 路由模拟: 按阶段、按凭据看一个请求会走到哪里( 1220);每个请求都会记录路由轨迹,还能列出进行中的请求( 1221)。 流式请求默认在首字节之前故障转移 ,另有首

  • Mai-with-u/MaiBotv1.4.02026-11-07

    …Key 可留空并使用无鉴权模式。 - 插件运行时:移除旧 Action 组件支持。 - 日志:将回复调度、消息防抖、WebUI 正常断线及逐步关停细节移至 DEBUG。 - 稳定性:降低内存占用,修复记忆去重、无效表情缓存和退出后进程残留等问题。 - 重构了统计页面,并大幅优化了统计计算速度

  • Monica-Pass/MonicaV1.0.3252026-11-07

    …义字段和模板准备移到后台。 - 改善系统密钥服务异常时的启动与恢复:输入法、自动填充、凭据导出和后台调度共用受控入口,避免重复同步读取及未捕获异常;保留原密文和配置,支持已有主密码保护材料的确认恢复。锁定后拒绝迟到的密钥结果,常用账号迁移遇到不可读字段时保留原值。直接依赖已永久丢失硬件密钥的旧内容仍需要原密钥或备份。 修复并发启动检查交接