可视化无代码网页爬虫，通过图形界面设计和执行采集任务，让不懂编程的人也能批量抓取网页数据。
一站式爬虫工具箱，能自动抓取并导出 GitHub、邮箱、电商、运营商、社交平台等几十个网站的个人数据，帮用户把散落各处的数据拿回自己手里。
给一个示例 URL，自动学习网页结构并生成抓取规则，省去手写解析逻辑，适合快速采集相似页面的数据。
用 Flask + Redis 搭建的代理池，自动从多个来源抓取免费代理并持续检测可用性，通过 HTTP 接口给爬虫提供稳定可用的代理 IP。
提供 Python API 访问禁漫天堂，支持网页端和移动端，可配合 GitHub Actions 自动下载漫画。
用 Python 抓取 LinkedIn 用户和公司公开数据的爬虫库，基于 Chrome/Firefox 驱动模拟浏览，适合做招聘信息或人脉数据采集。
用 TypeScript 编写的数据抓取工具，目前主要面向成人内容平台，能定期抓取并归档 OnlyFans 等站点的媒体数据。
用 Node.js 抓取 Google Play 应用详情、评论、搜索结果的爬虫库，省去自己解析页面和接口的麻烦。
把 Scrapy 爬虫包装成 HTTP API，让其他语言或服务能远程触发爬虫并实时拿到抓取结果，省去自己搭调度和传输层。
用 Elixir 写的高性能网页爬虫和抓取引擎，适合需要并发抓取并保存页面文件的场景。
把整个网站连同 CSS、图片、JS 等资源一起下载到本地目录，方便离线浏览或做站点备份。
一套面向 40 多个热门网站的 Python 爬虫脚本合集，内置代理和反爬绕过能力，省去从零处理验证码与封禁的麻烦。
Python 的高层网页抓取框架，帮你快速写爬虫，自动处理请求调度、页面解析和数据提取，适合大规模采集任务。
抓取 Google Play 上应用、游戏、影视和图书的公开信息，比如评分、评论和详情，省去自己解析页面。
自动获取被 Cloudflare 挑战拦截的网站所下发的 cf_clearance Cookie，方便爬虫绕过验证继续访问。
一个通用的 Reddit 爬虫，能抓取任意子版块或用户的内容，适合做数据采集和舆情分析。
基于 Chrome CDP 复用真实登录态抓取 BOSS 直聘职位数据，能绕过字体反爬，直接输出明文薪资的 JSON/CSV 并做薪资技能分析。
用 Python 抓取 Google Maps 上商户的评论数据，适合做口碑分析和竞品调研时批量采集评论。
从 Telegram 群组批量抓取成员（包括隐藏成员），并可直接把抓到的用户添加到自己的群组里。
Python 写的代理池服务，自动抓取、校验并维护可用代理，通过 Redis 存储，给爬虫提供稳定的 HTTP 代理来源。
用 LLM 驱动的网页抓取工具，支持 OpenAI、Gemini 和 Ollama，能按自然语言指令从网页中提取结构化数据，省去手写解析规则。
PHP 版网页抓取工具，提供类似 BeautifulSoup 的简洁 API，可解析 HTML、提取页面数据，并支持无头浏览器渲染动态页面。
把任意网页抓取并转成干净 Markdown 或结构化数据，直接喂给 LLM 和 AI Agent，省去自己写爬虫和清洗的麻烦。
从任意 URL 抓取网页元数据，自动解析 Open Graph、JSON-LD 和 HTML meta 标签，并带智能兜底，适合做链接预览和内容摘要。
多线程网页爬虫，递归抓取整站并把每个页面转成 Markdown 文件，为 LLM RAG 准备干净的语料。
Python 网页抓取框架，从单次请求到大规模爬取都能处理，内置 Playwright 支持，还提供 MCP 服务方便接入 AI 工作流。
用 Scala 写网页抓取时，它提供一套简洁的 DSL 来解析 HTML、提取内容，省去手写解析逻辑的麻烦。
支持腾讯漫画、动漫之家、webtoons、pixivコミック等几十个中日漫画小说站点，可批量抓取章节并打包成 epub 电子书。
把 n0madic 的 Twitter 抓取库移植到 Node.js，无需官方 API 就能抓取推文、用户资料和搜索结果。
用 jQuery 风格的语法在服务端解析和操作 HTML/XML，写爬虫时提取页面数据比正则和原生 DOM 顺手得多。
Go 语言编写的高性能网页抓取与爬虫框架，提供简洁 API 处理请求、解析页面和并发抓取，适合快速搭建采集程序。
把 Apify Store 上数千个现成爬虫和自动化工具封装成 MCP 服务，让 AI Agent 直接抓取社交媒体、搜索引擎、地图和电商网站的数据。
用大语言模型驱动的 Python 爬虫，只需描述想抓什么，就能自动完成网页抓取和结构化数据提取，省去手写解析规则。
功能丰富的命令行音视频下载器，支持从 YouTube 等大量网站抓取视频和音频，还能调用 SponsorBlock 自动跳过广告片段。
命令行图片批量下载器，支持 Pixiv、Twitter、DeviantArt、Danbooru 等几十个图站，一条命令就能把画师主页或标签下的图集整批抓下来。
Node.js/TypeScript 网页抓取与浏览器自动化库，内置代理轮换和反封锁，兼容 Puppeteer、Playwright、Cheerio，可稳定采集数据供 AI、LLM、RAG 使用。
用 Python 3 从新闻网页里自动抽取正文、标题、作者等元数据，省去自己写解析规则，适合做新闻聚合和内容抓取。
一个基于 Chromium 的代理服务器，自动处理 Cloudflare 的浏览器验证，让爬虫和自动化脚本能顺利访问被防护的网站。
面向 AI 智能体的网页抓取与数据提取爬虫，把网页转成干净的 Markdown 喂给 LLM 和 RAG 流程，支持自托管。
用 Node.js 把任意网站的完整源码连同 JS、CSS、图片等资源一起抓下来，方便离线保存或本地研究页面结构。