一条命令就能从数百个模型和供应商里筛出适合你硬件配置的本地大模型,省去逐个试跑和查显存的麻烦。
基于 Langchain 和 ChatGLM、Qwen、Llama 等本地大模型搭建的知识库问答应用,支持 RAG 检索增强与 Agent 能力,可离线部署私有文档问答系统。
本地一键跑起 Kimi、DeepSeek、Qwen、Gemma 等大模型,省去环境配置和依赖折腾,适合快速做推理和原型验证。
可自托管的个人 AI 第二大脑,能从网页和本地文档中检索答案,支持自定义智能体、定时自动化和深度研究,兼容多种在线或本地大模型。
把多家大模型、AI Agent 和 MCP 工具整合到一个桌面工作台里,方便日常对话、调用工具和提升生产力。
轻量级开源个人 AI 助手,支持本地 LLM、MCP 协议和多智能体协作,可接入 Discord 等聊天平台做日常自动化。
一款 iOS/macOS 原生应用,通过 Ollama 连接本地自托管的大语言模型(Llama2、Mistral、Vicuna 等)进行对话,让私有模型在苹果设备上开箱即用。
在骁龙设备的 NPU、GPU 和 CPU 上本地跑大模型和多模态模型,几行代码就能接入,省去自己适配硬件的麻烦。
本地大模型推理服务的模型热切换代理,按需自动加载和卸载不同模型,让单个服务端同时对外提供多个 LLM,省去手动重启。
给 Paperless-ngx 文档库接上大模型,自动分析文档内容并打标签,支持 OpenAI、Ollama、DeepSeek-r1、Azure 等兼容接口。
把普通 PC、Mac 或 Linux 机器变成私有 AI 服务器,集成 llama.cpp、ComfyUI、Open WebUI、n8n 等组件,方便本地跑大模型、RAG 和 Agent 工作流。
纯 Rust 实现的 WebGPU 推理引擎,原生支持 GGUF 模型,兼容 OpenAI API,无需 Python 和 llama.cpp,单个二进制文件即可在任意 GPU 上跑本地大模型。