OSS Radar
首页
AI 分类
推理与服务5
大模型推理服务 · 向量化 / 重排服务 · 网关与路由
训练与微调6
训练框架 · 参数高效微调 · 后训练 / RLHF
数据工程4
数据集托管 · 数据清洗与处理 · 合成数据
检索与 RAG9
向量数据库 · RAG 框架 · 检索增强引擎
Agent 与编排6
Agent 框架 · 编码 Agent · 电脑 / 浏览器 Agent
评估 · 实验 · MLOps8
模型评测 · Agent 评测 · 实验管理
多模态生成5
图像生成 · 视频生成 · 视觉语言模型
视觉与 3D5
检测 / 分割 · 3D 重建 · 3D 生成
模型工具链8
量化 · 剪枝与蒸馏 · 格式转换
科研与论文实现3
论文复现 · 时序预测 · 科学计算 / 生物医药
开发工具
开发与框架5构建与交付4底层与逆向3
系统工具
系统与文件7图像与影音工具5实用小工具4
效率工具
记录与整理3输入与阅读4
媒体与内容
播放与媒体库4内容处理3
网络工具
访问与代理3连接与传输4
游戏相关
开发与运行2游玩相关2
安全与隐私
攻防与审计3加密与隐私1
硬件与机器人
嵌入式与物联网5机器人与具身智能3
数据与金融
数据库与存储4金融与量化1
探索排行榜开发语言标签
/
周报
本周新增、涨得最快、发了什么版本
对比项目
两个项目并排看 star、维护状态与硬件
数据体检
收录量、完整度缺口、沉睡项目
提交仓库
推荐项目,附上你的使用经验
反馈与纠错
分类错了、介绍不准、链接失效
关于本站
数据来源与分类原则
登录
OSS Radar

按算法工程工作流分类的开源工具库。数据来自 GitHub 公开 API,收录 6,740 个仓库、129 个细分分类。 带 ✦ 的条目有人工撰写的专家点评。

数据最近同步于 2026/11/11 14:07:13 · 本项目仅做聚合与索引,软件版权归原作者所有

浏览

  • 全部仓库
  • AI 分类
  • 排行榜
  • 开发语言
  • 标签与关键词
  • 搜索

关于

  • 关于本站
  • 数据体检
  • 提交仓库
  • 反馈与纠错
  • 偏好设置
  • 我的收藏
  • 我的点评
© 2026 OSS Radar数据每小时级同步 · 内容由算法与人工共同维护
⌘K
「本地 LLM」找到 301 个结果 · 76ms命中词:本地llmlocalofflinelocal* offline*只看有点评
A
anything-llm
Mintplex-Labs·JavaScript

本地优先的 AI 智能体工作台,把文档、对话和工具整合成可私有部署的知识库与代理,数据留在自己机器上,不用租用云端智能服务。

本地AI+4
681750—
Mintplex-Labs/anything-llm · 17.48
A
airllm
lyogavin·Jupyter Notebook

单张 4GB 显存显卡就能跑 70B 甚至 2.8T 参数大模型的分层推理方案,通过逐层加载权重把显存需求压到极低,适合本地低配设备部署大模型。

大模型推理+4
421570—
lyogavin/airllm · 16.79
L
LocalAI
mudler·Go

开源本地 AI 推理引擎,无需 GPU 即可在任意硬件上跑 LLM、视觉、语音和图像生成模型,提供兼容 OpenAI 的 API。

推理引擎+4
503120—
mudler/LocalAI · 16.74
H
Hands-On-Large-Language-Models
HandsOnLLM·Jupyter Notebook

O'Reilly《Hands-On Large Language Models》官方配套代码,用 Jupyter Notebook 带你动手跑通大模型的分词、嵌入、提示工程、微调与 RAG 等核心环节。

大语言模型+4
301170—
HandsOnLLM/Hands-On-Large-Language-Models · 16.54
L
llmfit
AlexsJones·Rust

一条命令就能从数百个模型和供应商里筛出适合你硬件配置的本地大模型,省去逐个试跑和查显存的麻烦。

本地推理+4
389090—
AlexsJones/llmfit · 16.54
L
local-deep-research
LearningCircuit·Python

本地优先的深度研究问答系统,接 llama.cpp、Ollama 等本地或云端模型,聚合 arXiv、PubMed 及私有文档等十余个检索源,全程加密。

深度研究+4
95640—
LearningCircuit/local-deep-research · 16.16
M
mlc-llm
mlc-ai·Python

通用大模型部署引擎,借助机器学习编译技术把 LLM 高效跑在各种硬件上,从手机到服务器都能用。

推理引擎+4
233650—
mlc-ai/mlc-llm · 16.01
L
llmware
llmware-ai·Python

用小型专用模型搭建企业级 RAG 流水线的统一框架,覆盖文档解析、检索和智能体编排,适合在本地或私有环境部署。

RAG流水线+4
148220—
llmware-ai/llmware · 15.88
L
llm-scraper
mishushakov·TypeScript

用大模型把任意网页抓取并转成结构化数据,底层靠 Playwright/Puppeteer 驱动浏览器,适合做网页信息抽取和自动化采集。

网页抓取+4
69550—
mishushakov/llm-scraper · 15.25
S
self-llm
datawhalechina·Jupyter Notebook

面向中文用户的 Linux 环境大模型实战教程,手把手教你在本地微调(全参数/LoRA)和部署国内外开源 LLM 与多模态模型。

大模型微调+4
327500—
datawhalechina/self-llm · 15.24
N
nano-vllm
GeeeekExplorer·Python

用 PyTorch 从零实现的轻量级 vLLM,代码精简易读,适合学习大模型推理引擎的调度、KV Cache 和 PagedAttention 等核心机制。

推理引擎+4
163880—
GeeeekExplorer/nano-vllm · 14.91
L
LLM-Engineers-Handbook
PacktPublishing·Python

从 LLM 基础讲到用 LLMOps 最佳实践把 RAG 应用部署到 AWS 的实战手册,覆盖微调、评估与 ML 系统设计。

LLMOps+4
54270—
PacktPublishing/LLM-Engineers-Handbook · 14.9
L
llm-graph-builder
neo4j-labs·Jupyter Notebook

用 LLM 从非结构化文本里自动抽取实体和关系,直接建成 Neo4j 知识图谱,省去手工建模和写 Cypher 的麻烦,适合做 GraphRAG 和知识库。

知识图谱+4
53020—
neo4j-labs/llm-graph-builder · 14.9
R
rllm
rllm-org·Python

面向大语言模型的强化学习训练框架,支持分布式训练与智能体工作流,让开发者能低成本训练和调优推理模型。

强化学习+4
59160—
rllm-org/rllm · 14.88
L
llm-universe
datawhalechina·Jupyter Notebook

面向零基础开发者的大模型应用开发教程,手把手带你用 LangChain 搭建 RAG 应用,从调用 API 到构建知识库问答系统。

大模型教程+4
142890—
datawhalechina/llm-universe · 14.84
O
OpenLLM
bentoml·Python

把 DeepSeek、Llama 等开源大模型一键部署成兼容 OpenAI 的 API 服务,省去自己搭推理后端的麻烦。

大模型部署+4
125910—
bentoml/OpenLLM · 14.83
O
openllmetry
traceloop·Python

基于 OpenTelemetry 的 LLM 应用可观测性工具,能追踪调用链、采集指标并监控模型表现,帮你在生产环境定位 GenAI 应用的性能与质量问题。

LLM 可观测+4
75290—
traceloop/openllmetry · 14.32
S
semantic-router
vllm-project·Go

面向 LLM 推理的可编程语义路由层,按请求语义把流量分发到不同模型和算力,并内置护栏与 K8s 集成。

语义路由+4
64510—
vllm-project/semantic-router · 14.21
L
LLM4Decompile
albertan017·Python

用大语言模型把编译后的二进制代码还原成可读源码,为逆向工程提供自动化反编译能力。

反编译+4
72850—
albertan017/LLM4Decompile · 14.03
H
h2o-llmstudio
h2oai·Python

无需写代码就能微调大语言模型的可视化界面,从数据准备到训练评估一站式完成,适合不想碰命令行直接调模型的团队。

零代码微调+4
51930—
h2oai/h2o-llmstudio · 14.03
C
chinese-llm-benchmark
jeinlee1991

持续更新的中文大模型能力评测榜单,已收录374个商用与开源模型,并提供超200万条缺陷库,方便研究者横向对比模型表现、定位问题并改进。

大模型评测+4
65110—
jeinlee1991/chinese-llm-benchmark · 14
O
ollama
ollama·Go

本地一键跑起 Kimi、DeepSeek、Qwen、Gemma 等大模型,省去环境配置和依赖折腾,适合快速做推理和原型验证。

本地推理+3
1866360—
ollama/ollama · 11.81
L
llama.cpp
ggml-org·C++

用 C/C++ 实现的大模型推理引擎,能在普通 CPU 和消费级显卡上跑 LLaMA 等模型,支持量化以降低显存占用。

推理引擎+4
1340570—
ggml-org/llama.cpp · 11.34
A
AutoGPT
Significant-Gravitas·Python

让大模型自主拆解目标、调用工具并连续执行任务的智能体平台,提供可视化搭建与运行环境,帮你把重复性工作交给 AI 自动完成。

自主智能体+4
1879910—
Significant-Gravitas/AutoGPT · 11.25
J
jan
janhq·Rust

在本地电脑上离线运行大模型的桌面客户端,是 ChatGPT 的开源替代品,无需联网即可对话,数据不出本机。

本地推理+4
456680—
janhq/jan · 11.02
C
cherry-studio
CherryHQ·TypeScript

把多家大模型、AI Agent 和 MCP 工具整合到一个桌面工作台里,方便日常对话、调用工具和提升生产力。

AI 工作台+4
534250—
CherryHQ/cherry-studio · 10.85
K
khoj
khoj-ai·Python

可自托管的个人 AI 第二大脑,能从网页和本地文档中检索答案,支持自定义智能体、定时自动化和深度研究,兼容多种在线或本地大模型。

个人知识库+4
381070—
khoj-ai/khoj · 10.74
U
unsloth
unslothai·Python

本地跑和训练大模型、扩散模型的图形界面,支持 GGUF、MLX 及 Qwen、DeepSeek、Gemma、FLUX 等主流模型,省去命令行配置的麻烦。

本地推理+4
793200—
unslothai/unsloth · 10.68
M
MoneyPrinterTurbo
harry0703·Python

输入一个主题或关键词,就能自动完成文案生成、素材匹配、配音字幕和视频合成,一键产出高清短视频,省去手工剪辑的麻烦。

短视频生成+4
1422210—
harry0703/MoneyPrinterTurbo · 10.59
N
nanobot
HKUDS·Python

轻量级开源个人 AI 助手,支持本地 LLM、MCP 协议和多智能体协作,可接入 Discord 等聊天平台做日常自动化。

个人助手+4
500100—
HKUDS/nanobot · 10.57
O
OpenHands
OpenHands·TypeScript

一个能自主写代码、改 bug、跑命令的 AI 开发代理,把大模型接入真实开发环境,让编码任务从对话直接落到执行。

编码代理+4
931990—
OpenHands/OpenHands · 10.51
B
browser-use
browser-use·Python

开源的 Python 库,让大模型直接操控浏览器完成点击、填表、抓取等网页任务,省去手写 Playwright 脚本的麻烦。

浏览器自动化+4
1206710—
browser-use/browser-use · 10.48
L
Langchain-Chatchat
chatchat-space·Python

基于 Langchain 和 ChatGLM、Qwen、Llama 等本地大模型搭建的知识库问答应用,支持 RAG 检索增强与 Agent 能力,可离线部署私有文档问答系统。

知识库问答+4
387120—
chatchat-space/Langchain-Chatchat · 10.45
S
SWE-agent
SWE-agent·Python

把 GitHub issue 直接丢给大模型,自动定位代码并生成修复补丁,还能用于安全攻防和竞赛编程。

代码修复+4
207800—
SWE-agent/SWE-agent · 10.43
L
letta
letta-ai

给大模型智能体加上持久记忆和状态管理,让 Agent 能跨会话记住信息、持续学习并自我改进。

有状态智能体+4
254150—
letta-ai/letta · 10.4
A
autogen
microsoft·Python

微软开源的多智能体编程框架,让开发者用对话编排多个 LLM Agent 协作完成复杂任务,支持自定义角色与工具调用。

多智能体+4
617830—
microsoft/autogen · 10.39
K
kotaemon
Cinnamon·Python

开源的 RAG 文档问答工具,上传文档后即可用大模型对话检索,快速搭建私有知识库问答。

RAG+4
259040—
Cinnamon/kotaemon · 10.38
Q
QwenPaw
agentscope-ai·TypeScript

开箱即用的个人 AI 助手,可本地或云端部署,接入多种聊天应用,并通过 MCP 与工具扩展能力。

个人助手+4
376140—
agentscope-ai/QwenPaw · 10.37
R
Resume-Matcher
srbhr·Python

本地运行的简历匹配与生成工具,用 100+ 大模型解析简历、计算与职位描述的文本相似度,并生成 PDF 和求职信。

简历解析+4
292420—
srbhr/Resume-Matcher · 10.32
A
ai-engineering-hub
patchy631·Jupyter Notebook

面向 LLM、RAG 和真实 AI Agent 应用的深度教程合集,用 Jupyter Notebook 带你从原理到落地跑通完整案例。

LLM教程+4
417430—
patchy631/ai-engineering-hub · 10.28

发布说明里提到「本地 LLM」

来自 6 个版本
  • poco-ai/Agenterov0.15.52026-11-11

    概要 本次更新新增导入后自动翻译、本地 LaTeX 项目管理与源码审阅评论,并改进 Mermaid 图表交互和全文翻译进度。修复了部分译文恢复、PDF 缩放偏移、自建 MinerU 4.1、订阅发现及 Linux AppImage 下的工具启动问题。 新功能 - 导入后自动翻译 : 开启设置后,新导入的论文会在版面解析完成后进入后台全文翻

  • DSH-APP/DSHAv0.2.2-rc.12026-11-10

    …hell section gap" (24dp),首组不再叠加两段留白,直接接外壳页头。 - 插件页本地插件入口改为两个独立卡片:外层 pluginLocalCard 不再套 ShellCard ,只作横向容器;「导入插件包」与「导出插件」( btnImport / btnExport )各自使用 ShellCard 圆角包裹、 ?att

  • vnotex/vnotev4.14.22026-11-10

    …务或求值其变量前,要求在本机信任该笔记本;重启后保留授权,显式关闭笔记本时清除授权,仅自动信任新建的本地笔记本 编辑与 Markdown 将两个 Markdown 标记隐藏开关替换为“不隐藏”“被动”和“积极”预设;默认使用“积极”且不迁移旧设置,将编辑体验选项映射为“积极”/“被动”,并在内嵌 Markdown 编辑器中使用“积极”模式

  • rootsongjc/kubernetes-handbookv2026.11.102026-11-10

    …别名便于检索;引入 part 层级,全书骨架更清晰。 - AI Native 章节重构 :HAMi 本地推理文档与脚本面向 macOS 重构,KAITO、KubeFleet 等 AI 推理基础设施内容增强。 - 书单页更新 :收录多本云原生书籍的翻译进度与导读信息。 内容质量提升 - 补全缺失的 front matter 描述字段,修复多

  • ArcReel/ArcReelv0.36.02026-11-10

    …目前支持 TOS)后,新生成、上传和导入的图片保存到自己的存储桶,本机不必长期保留全部图片。默认仍为本地,已有图片不会迁移。远端图片可以照常预览、编辑和用于分镜与视频生成;清理本地缓存后,ArcReel 会按需取回。删除的远端图片版本可以从项目回收站恢复。 模型下线提醒: 供应商的模型列表会标出「即将下线」和「已下线」。设置或项目中选中的

  • JiangNanGenius/floe-agentv1.8.72026-11-10

    …。 - 局域网发现增加常用设备范围、扫描进度、取消和结果复用;完善连接工具的历史输入与错误反馈,改进本地 Linux 网络传输。 - LaTeX 原生排版按文章补齐宏包和字体,生成 PDF 并保留目录、链接和阅读位置;改善 PCB 元件库、化学编辑器、手记与文档助手、苹果同步和任务状态提示。 - 修复图乐园产物提示与图标,增加独立的自动调