OSS Radar
首页
AI 分类
推理与服务5
大模型推理服务 · 向量化 / 重排服务 · 网关与路由
训练与微调6
训练框架 · 参数高效微调 · 后训练 / RLHF
数据工程4
数据集托管 · 数据清洗与处理 · 合成数据
检索与 RAG9
向量数据库 · RAG 框架 · 检索增强引擎
Agent 与编排6
Agent 框架 · 编码 Agent · 电脑 / 浏览器 Agent
评估 · 实验 · MLOps8
模型评测 · Agent 评测 · 实验管理
多模态生成5
图像生成 · 视频生成 · 视觉语言模型
视觉与 3D5
检测 / 分割 · 3D 重建 · 3D 生成
模型工具链8
量化 · 剪枝与蒸馏 · 格式转换
科研与论文实现3
论文复现 · 时序预测 · 科学计算 / 生物医药
开发工具
开发与框架5构建与交付4底层与逆向3
系统工具
系统与文件7图像与影音工具5实用小工具4
效率工具
记录与整理3输入与阅读4
媒体与内容
播放与媒体库4内容处理3
网络工具
访问与代理3连接与传输4
游戏相关
开发与运行2游玩相关2
安全与隐私
攻防与审计3加密与隐私1
硬件与机器人
嵌入式与物联网5机器人与具身智能3
数据与金融
数据库与存储4金融与量化1
探索排行榜开发语言标签
/
周报
本周新增、涨得最快、发了什么版本
对比项目
两个项目并排看 star、维护状态与硬件
数据体检
收录量、完整度缺口、沉睡项目
提交仓库
推荐项目,附上你的使用经验
反馈与纠错
分类错了、介绍不准、链接失效
关于本站
数据来源与分类原则
登录
OSS Radar

按算法工程工作流分类的开源工具库。数据来自 GitHub 公开 API,收录 6,740 个仓库、129 个细分分类。 带 ✦ 的条目有人工撰写的专家点评。

数据最近同步于 2026/11/11 14:07:13 · 本项目仅做聚合与索引,软件版权归原作者所有

浏览

  • 全部仓库
  • AI 分类
  • 排行榜
  • 开发语言
  • 标签与关键词
  • 搜索

关于

  • 关于本站
  • 数据体检
  • 提交仓库
  • 反馈与纠错
  • 偏好设置
  • 我的收藏
  • 我的点评
© 2026 OSS Radar数据每小时级同步 · 内容由算法与人工共同维护
⌘K
「GPU调度」找到 45 个结果 · 23ms命中词:调度gpu只看有点评
G
gpustack
gpustack·Python

统一管理 GPU 集群,调度 vLLM、SGLang 等推理引擎做高性能模型服务,还能按需开出可 SSH 登录的 GPU 实例。

GPU 集群管理+4
60220—
gpustack/gpustack · 19.5
S
skypilot
skypilot-org·Python

把分散在多家云上的 GPU 资源统一调度成一台「AI 超算」,自动选最便宜的可用算力跑训练、微调和推理任务,省去手动比价与跨云管理。

多云调度+4
108210—
skypilot-org/skypilot · 13.14
C
ColossalAI
hpcaitech·Python

一套面向大模型训练的分布式并行框架,把数据、模型、流水线并行和异构训练整合成统一接口,让训练和推理更省显存、更快。

分布式训练+4
414300—
hpcaitech/ColossalAI · 13.07
T
tvm
apache·Python

把深度学习模型编译到 CPU、GPU 及各类加速器上运行的开源编译器框架,通过统一中间表示和自动调优提升推理性能。

深度学习编译器+4
138980—
apache/tvm · 12.95
A
AutoGPT
Significant-Gravitas·Python

让大模型自主拆解目标、调用工具并连续执行任务的智能体平台,提供可视化搭建与运行环境,帮你把重复性工作交给 AI 自动完成。

自主智能体+4
1879910—
Significant-Gravitas/AutoGPT · 12.83
R
ray
ray-project·Python

分布式 AI 计算引擎,提供核心分布式运行时和一组 AI 库,用来加速机器学习负载、大模型推理与超参搜索。

分布式计算+4
442560—
ray-project/ray · 12.68
H
Halide
halide·C++

用 C++ 写的图像处理与数据并行计算 DSL,把算法和调度分开描述,自动生成适配 CPU、GPU 等硬件的高性能代码。

图像处理+4
66350—
halide/Halide · 12.64
T
triton
triton-lang·MLIR

Triton 是一门面向 GPU 编程的类 Python 语言及其编译器,让开发者不用写 CUDA 就能写出接近手写性能的高效内核。

GPU 编程+4
205540—
triton-lang/triton · 12.24
J
JARVIS
microsoft·Python

把大语言模型和 Hugging Face 上的各类模型连起来,让 LLM 自动挑选、调用合适的模型完成多模态任务,相当于给模型加了个调度中枢。

模型调度+4
256090—
microsoft/JARVIS · 12.17
M
Mooncake
kvcache-ai·C++

Mooncake 是支撑 Kimi 大模型服务的推理平台,通过 KVCache 分离式架构和 RDMA 高速传输,把预填充与解码拆开部署,提升长上下文场景下的吞吐和资源利用率。

推理服务+4
70220—
kvcache-ai/Mooncake · 12.11
F
fastai
fastai·Jupyter Notebook

基于 PyTorch 的深度学习高层封装库,用少量代码就能训练出高精度模型,配套 notebook 教程降低入门门槛。

深度学习+4
282650—
fastai/fastai · 12.08
N
nano-vllm
GeeeekExplorer·Python

用 PyTorch 从零实现的轻量级 vLLM,代码精简易读,适合学习大模型推理引擎的调度、KV Cache 和 PagedAttention 等核心机制。

推理引擎+4
163880—
GeeeekExplorer/nano-vllm · 12.04
L
llmfit
AlexsJones·Rust

一条命令就能从数百个模型和供应商里筛出适合你硬件配置的本地大模型,省去逐个试跑和查显存的麻烦。

本地推理+4
389090—
AlexsJones/llmfit · 12.01
T
TensorRT
NVIDIA·C++

NVIDIA 官方的高性能深度学习推理 SDK,能把训练好的模型在 NVIDIA GPU 上做极致加速和部署,适合追求低延迟高吞吐的生产推理场景。

推理引擎+4
134470—
NVIDIA/TensorRT · 11.94
T
TensorRT-LLM
NVIDIA·Python

用 Python API 定义大模型,并借助 TensorRT 在 NVIDIA GPU 上做极致优化推理,还提供 Python/C++ 运行时来编排高性能服务。

推理引擎+4
150610—
NVIDIA/TensorRT-LLM · 11.88
P
postgresml
postgresml·Rust

在 PostgreSQL 数据库内直接跑机器学习和向量检索,用 SQL 就能做嵌入、分类、聚类和 LLM 推理,省去单独搭推理服务的麻烦。

向量数据库+4
68320—
postgresml/postgresml · 11.8
L
LMCache
LMCache·Python

给 LLM 推理加速的 KV Cache 层,可对接 vLLM 等框架,复用和缓存键值对来降低显存占用、提升吞吐,支持 CUDA 和 ROCm。

KV缓存+4
123360—
LMCache/LMCache · 11.71
P
PowerInfer
Tiiny-AI·C++

面向本地部署的高速大模型推理引擎,通过稀疏激活与量化等技术,让消费级显卡也能流畅跑起 Llama 类模型。

大模型推理+4
98760—
Tiiny-AI/PowerInfer · 11.61
M
Megatron-LM
NVIDIA·Python

NVIDIA 的大规模 Transformer 训练框架,支持张量并行、流水线并行等模型并行策略,用来在成百上千张 GPU 上高效预训练大语言模型。

大模型训练+4
183740—
NVIDIA/Megatron-LM · 11.6
O
Open-AutoGLM
zai-org·Python

开源手机智能体模型与框架,让 AI 直接操作手机界面完成点按、输入等任务,把「AI 手机」能力开放给所有人。

手机智能体+4
265740—
zai-org/Open-AutoGLM · 11.53
W
Waifu2x-Extension-GUI
AaronFeng753·C++

集成 Waifu2x、Real-ESRGAN、Real-CUGAN 等多种超分模型与 RIFE 等补帧算法的图形界面工具,可批量放大视频、图片和 GIF 并提升帧率。

超分辨率+4
172160—
AaronFeng753/Waifu2x-Extension-GUI · 11.46
V
vllm-omni
vllm-project·Python

面向全模态模型的高效推理框架,支持图像、视频、音频生成与多模态模型服务,基于 PyTorch 提供统一的推理与部署能力。

全模态推理+4
76950—
vllm-project/vllm-omni · 11.46
W
windows
dockur·Shell

把 Windows 系统装进 Docker 容器里跑,用容器方式启动完整 Windows 虚拟机,省去单独配置虚拟化环境的麻烦。

Windows 容器+3
541540—
dockur/windows · 11.42
N
ncnn
Tencent·C++

面向手机端的高性能神经网络推理框架,针对 ARM 平台深度优化,让 Caffe、ONNX 等模型能在 Android/iOS 上低延迟运行。

推理框架+4
240370—
Tencent/ncnn · 11.4
P
PaddleOCR
PaddlePaddle·Python

轻量级 OCR 工具包,能把图片和 PDF 转成结构化数据,支持 100 多种语言,方便接入 LLM 和 RAG 流程。

OCR+4
925710—
PaddlePaddle/PaddleOCR · 11.34
S
sglang
sgl-project·Python

高性能大模型与多模态模型推理服务框架,通过优化注意力机制和调度策略提升吞吐与延迟表现,支持 Llama、DeepSeek、MoE 等主流模型部署。

推理服务框架+4
387310—
sgl-project/sglang · 11.33
S
SmartSub
buxuku·TypeScript

一站式桌面工具,用本地 Whisper、FunASR 等模型离线把视频转成字幕,还能翻译、AI 配音、声音克隆和烧录字幕,支持批量处理与全平台 GPU 加速。

语音转字幕+4
60080—
buxuku/SmartSub · 11.32
K
kubeflow
kubeflow

基于 Kubernetes 的云原生机器学习平台,把训练、流水线编排、模型服务和 Notebook 开发统一到容器化集群里,解决 MLOps 各环节割裂、难以规模化调度的问题。

云原生+4
159590—
kubeflow/kubeflow · 11.27
P
playwright-mcp
microsoft·TypeScript

把 Playwright 浏览器自动化能力封装成 MCP 服务器,让 AI Agent 通过结构化接口操控网页、抓取页面内容,无需依赖截图识别。

浏览器自动化+4
394910—
microsoft/playwright-mcp · 11.23
M
mpv
mpv-player·C

轻量级命令行视频播放器,基于 FFmpeg 解码,支持硬件加速、字幕渲染和脚本扩展,适合在终端或嵌入其他应用中播放音视频。

命令行播放器+4
380630—
mpv-player/mpv · 11.16
O
OpenRLHF
OpenRLHF·Python

基于 Ray 的高性能 RLHF 训练框架,支持 PPO、DAPO、REINFORCE++ 等算法与 vLLM 推理加速,可扩展地完成大模型和视觉语言模型的对齐后训练。

RLHF+4
101480—
OpenRLHF/OpenRLHF · 11.13
C
cube-studio
tencentmusic

云原生一站式机器学习与大模型平台,覆盖 Notebook 开发、拖拉拽 Pipeline 编排、分布式训练、超参搜索、推理服务和 SFT/强化学习微调,支持国产算力生态。

云原生+4
50840—
tencentmusic/cube-studio · 11.04
T
turbo-fieldfare
drumih·Swift

在任意 M 系列 MacBook 上仅用约 2GB 内存跑 Gemma 4 26B-A4B 大模型推理,靠 Metal GPGPU 把 MoE 模型塞进本地设备。

本地推理+4
73330—
drumih/turbo-fieldfare · 11
S
scikit-image
scikit-image·Python

Python 图像处理算法库,提供滤波、分割、形态学、特征检测等常用算法,适合科研与工程中快速实现图像分析流程。

图像处理+4
66400—
scikit-image/scikit-image · 10.96
C
CowAgent
zhayujie·Python

开源个人 AI 助手与 Agent Harness,能规划任务、调用工具和技能,靠记忆与知识自我进化,支持多智能体、多模型、多渠道,一行命令即可安装。

智能体框架+4
478770—
zhayujie/CowAgent · 10.92
T
text-embeddings-inference
huggingface·Rust

面向文本嵌入模型的高性能推理服务,用 Rust 编写,可快速把文本转成向量,适合搭建检索和 RAG 的向量化后端。

文本嵌入+4
51190—
huggingface/text-embeddings-inference · 10.86
A
agent-lightning
microsoft·Python

给 AI Agent 做强化学习训练和调优的框架,把 Agent 的推理轨迹变成训练信号,让智能体越跑越强。

Agent 训练+4
189430—
microsoft/agent-lightning · 10.85
A
AutoSwarm-Shadow-Adapter
AhmadHassan-BTed·Python

给 OpenOPC 的智能体 DAG 运行时加一层零改造的人在回路适配器,让外部智能体执行流程中能插入人工审核与干预。

人在回路+4
51970—
AhmadHassan-BTed/AutoSwarm-Shadow-Adapter · 10.82
F
frigate
blakeblackshear·Python

本地运行的网络录像机,接入 IP 摄像头后实时做目标检测,识别到人、车等对象再触发录像和 MQTT 通知,画面不出家门。

网络录像机+4
373920—
blakeblackshear/frigate · 10.8
E
engine
cactus-compute·C++

面向手机等消费级设备的 LLM 推理引擎,用 2bit 量化和手写内核把大模型塞进端侧运行,主打低显存、跨 Android/iOS 的 ARM 部署。

端侧推理+4
61880—
cactus-compute/engine · 10.75