OSS Radar
首页
AI 分类
推理与服务5
大模型推理服务 · 向量化 / 重排服务 · 网关与路由
训练与微调6
训练框架 · 参数高效微调 · 后训练 / RLHF
数据工程4
数据集托管 · 数据清洗与处理 · 合成数据
检索与 RAG9
向量数据库 · RAG 框架 · 检索增强引擎
Agent 与编排6
Agent 框架 · 编码 Agent · 电脑 / 浏览器 Agent
评估 · 实验 · MLOps8
模型评测 · Agent 评测 · 实验管理
多模态生成5
图像生成 · 视频生成 · 视觉语言模型
视觉与 3D5
检测 / 分割 · 3D 重建 · 3D 生成
模型工具链8
量化 · 剪枝与蒸馏 · 格式转换
科研与论文实现3
论文复现 · 时序预测 · 科学计算 / 生物医药
开发工具
开发与框架5构建与交付4底层与逆向3
系统工具
系统与文件7图像与影音工具5实用小工具4
效率工具
记录与整理3输入与阅读4
媒体与内容
播放与媒体库4内容处理3
网络工具
访问与代理3连接与传输4
游戏相关
开发与运行2游玩相关2
安全与隐私
攻防与审计3加密与隐私1
硬件与机器人
嵌入式与物联网5机器人与具身智能3
数据与金融
数据库与存储4金融与量化1
探索排行榜开发语言标签
/
周报
本周新增、涨得最快、发了什么版本
对比项目
两个项目并排看 star、维护状态与硬件
数据体检
收录量、完整度缺口、沉睡项目
提交仓库
推荐项目,附上你的使用经验
反馈与纠错
分类错了、介绍不准、链接失效
关于本站
数据来源与分类原则
登录
OSS Radar

按算法工程工作流分类的开源工具库。数据来自 GitHub 公开 API,收录 6,739 个仓库、129 个细分分类。 带 ✦ 的条目有人工撰写的专家点评。

数据最近同步于 2026/11/11 08:02:50 · 本项目仅做聚合与索引,软件版权归原作者所有

浏览

  • 全部仓库
  • AI 分类
  • 排行榜
  • 开发语言
  • 标签与关键词
  • 搜索

关于

  • 关于本站
  • 数据体检
  • 提交仓库
  • 反馈与纠错
  • 偏好设置
  • 我的收藏
  • 我的点评
© 2026 OSS Radar数据每小时级同步 · 内容由算法与人工共同维护
⌘K
「Java爬虫」找到 9 个结果 · 3ms命中词:爬虫javacrawlerscraperscrapingspider只看有点评
N
node-website-scraper
website-scraper·JavaScript

把整个网站连同 CSS、图片、JS 等资源一起下载到本地目录,方便离线浏览或做站点备份。

网站镜像+4
17690—
website-scraper/node-website-scraper · 15.37
P
playwright
microsoft·TypeScript

用一套 API 同时驱动 Chromium、Firefox 和 WebKit 的浏览器自动化与端到端测试框架,适合写跨浏览器测试和网页抓取脚本。

浏览器自动化+4
997960—
microsoft/playwright · 14.21
C
crawlee
apify·TypeScript

Node.js/TypeScript 网页抓取与浏览器自动化库,内置代理轮换和反封锁,兼容 Puppeteer、Playwright、Cheerio,可稳定采集数据供 AI、LLM、RAG 使用。

网页抓取+4
264120—
apify/crawlee · 13.81
N
node-ytdl-core
fent·JavaScript

用 JavaScript 实现的 YouTube 视频下载库,可在 Node.js 中直接抓取并保存视频,省去自己解析页面和拼接下载地址的麻烦。

视频下载+3
47350—
fent/node-ytdl-core · 10.12
N
NewPipeExtractor
TeamNewPipe·Java

从 YouTube、SoundCloud、Bandcamp 等流媒体站点抓取视频与音频元数据及流地址的 Java 解析库,是 NewPipe 客户端的核心组件。

流媒体解析+4
20510—
TeamNewPipe/NewPipeExtractor · 9.74
W
Website-downloader
AhmadIbrahiim·HTML

用 Node.js 把任意网站的完整源码连同 JS、CSS、图片等资源一起抓下来,方便离线保存或本地研究页面结构。

网站源码下载+4
60810—
AhmadIbrahiim/Website-downloader · 9.51
J
jvppeteer
fanyong920·Java

用 Java 调用 Chrome 和 Firefox 无头浏览器的 API,方便做网页抓取和自动化操作,省去自己封装浏览器协议。

无头浏览器+4
8040—
fanyong920/jvppeteer · 9.4
U
user-agents
intoli·TypeScript

每天更新数据的 JavaScript 库,用来生成随机 User-Agent,方便爬虫和浏览器自动化时伪装请求头、降低被识别风险。

User-Agent+4
11950—
intoli/user-agents · 9.37
A
ai-code-helper
liyupi·Vue

基于 Spring Boot 3.5 和 LangChain4j 的 AI 编程学习与求职辅导机器人实战项目,涵盖 RAG、Tool Calling、MCP、流式对话等企业级 AI 应用开发技术。

AI 编程助手+4
7650—
liyupi/ai-code-helper · 8.34