给一个示例 URL，自动学习网页结构并生成抓取规则，省去手写解析逻辑，适合快速采集相似页面的数据。

一站式爬虫工具箱，能自动抓取并导出 GitHub、邮箱、电商、运营商、社交平台等几十个网站的个人数据，帮用户把散落各处的数据拿回自己手里。

Python 网页抓取与浏览器自动化库，支持 Playwright、BeautifulSoup 和原始 HTTP，自带代理轮换，方便为 AI、LLM、RAG 稳定采集网页数据。

提供 Python API 访问禁漫天堂，支持网页端和移动端，可配合 GitHub Actions 自动下载漫画。

Python 的高层网页抓取框架，帮你快速写爬虫，自动处理请求调度、页面解析和数据提取，适合大规模采集任务。

Python 网页抓取框架，从单次请求到大规模爬取都能处理，内置 Playwright 支持，还提供 MCP 服务方便接入 AI 工作流。

Python 写的代理池服务，自动抓取、校验并维护可用代理，通过 Redis 存储，给爬虫提供稳定的 HTTP 代理来源。

用大语言模型驱动的 Python 爬虫，只需描述想抓什么，就能自动完成网页抓取和结构化数据提取，省去手写解析规则。

面向 AI 智能体的网页抓取与数据提取爬虫，把网页转成干净的 Markdown 喂给 LLM 和 RAG 流程，支持自托管。

用 Python 3 从新闻网页里自动抽取正文、标题、作者等元数据，省去自己写解析规则，适合做新闻聚合和内容抓取。

聚合多平台热点与 RSS 订阅，用 AI 做关键词筛选、翻译和简报分析，并通过微信、飞书、钉钉等渠道推送到手机，帮你摆脱信息过载。

开箱即用的 Python 财经数据接口库，一行代码就能拉取股票、债券、期货、外汇和宏观经济等公开数据，省去到处爬数据、清洗数据的麻烦。

一条命令就能从 Google 图片批量抓取几百张图片，支持按颜色、尺寸等条件筛选，适合快速搭建图像数据集。

一条命令行就能让 AI 智能体读取和搜索 Twitter、Reddit、YouTube、GitHub、B站、小红书等平台内容，不用付任何 API 费用。

用 Python 从 Instagram 批量下载图片、视频、配文和元数据，支持帖子、快照和用户主页，适合做数据采集和存档。

抖音和 TikTok 作品下载与数据采集工具，支持批量抓取视频、评论等数据并导出 CSV，可通过 Docker 部署。

递归式互联网扫描器，面向渗透测试和漏洞赏金场景，自动完成资产发现、攻击面管理与 OSINT 信息收集。

定制版 Selenium Chromedriver，开箱即用，能绕过 CloudFlare、Distil、Imperva 等主流反爬和机器人检测系统，适合做浏览器自动化时被拦截的场景。

从小红书链接中提取作品信息并批量采集下载，支持 Docker 部署和 API 调用，方便做内容归档或数据分析。

用 Go 写的视频下载库和命令行工具，支持 B 站、优酷、爱奇艺等站点，一条命令就能把网页视频存到本地。