把 Apify Store 上数千个现成爬虫和自动化工具封装成 MCP 服务,让 AI Agent 直接抓取社交媒体、搜索引擎、地图和电商网站的数据。
Node.js/TypeScript 网页抓取与浏览器自动化库,内置代理轮换和反封锁,兼容 Puppeteer、Playwright、Cheerio,可稳定采集数据供 AI、LLM、RAG 使用。
Python 网页抓取与浏览器自动化库,支持 Playwright、BeautifulSoup 和原始 HTTP,自带代理轮换,方便为 AI、LLM、RAG 稳定采集网页数据。
用 Node.js 抓取 Google Play 应用详情、评论、搜索结果的爬虫库,省去自己解析页面和接口的麻烦。
用 Flask + Redis 搭建的代理池,自动从多个来源抓取免费代理并持续检测可用性,通过 HTTP 接口给爬虫提供稳定可用的代理 IP。
提供 Python API 访问禁漫天堂,支持网页端和移动端,可配合 GitHub Actions 自动下载漫画。
把 Scrapy 爬虫包装成 HTTP API,让其他语言或服务能远程触发爬虫并实时拿到抓取结果,省去自己搭调度和传输层。
抓取 Google Play 上应用、游戏、影视和图书的公开信息,比如评分、评论和详情,省去自己解析页面。
用 LLM 驱动的网页抓取工具,支持 OpenAI、Gemini 和 Ollama,能按自然语言指令从网页中提取结构化数据,省去手写解析规则。
Go 语言编写的高性能网页抓取与爬虫框架,提供简洁 API 处理请求、解析页面和并发抓取,适合快速搭建采集程序。
用一套 API 同时驱动 Chromium、Firefox 和 WebKit 的浏览器自动化与端到端测试框架,适合写跨浏览器测试和网页抓取脚本。
PHP 版网页抓取工具,提供类似 BeautifulSoup 的简洁 API,可解析 HTML、提取页面数据,并支持无头浏览器渲染动态页面。
整理 Twitter 内部 GraphQL 接口的非官方文档,方便开发者查阅未公开的 API 端点与参数,用于数据抓取和逆向分析。
把 n0madic 的 Twitter 抓取库移植到 Node.js,无需官方 API 就能抓取推文、用户资料和搜索结果。
一个基于 Chromium 的代理服务器,自动处理 Cloudflare 的浏览器验证,让爬虫和自动化脚本能顺利访问被防护的网站。
面向 AI 智能体的网页抓取与数据提取爬虫,把网页转成干净的 Markdown 喂给 LLM 和 RAG 流程,支持自托管。
无需 API Key 即可抓取 Twitter 数据的 Python 库,直接调用 Twitter 内部接口,支持发推、搜索、爬取用户信息,还能做机器人。
非官方的 Finviz 数据接口,用 Python 抓取股票筛选器、图表和 CSV 数据,省去自己写爬虫解析网页的麻烦。
输入域名列表就能自动爬取 URL,扫描出接口、密钥、API key、文件扩展名和 token 等敏感信息,适合做渗透测试前期的信息收集。
用 Python 配合 Oxylabs SERP API 抓取 Google Trends 数据,提取关键词热度、地区分布和相关查询,并做结果对比。
用 Python 库和命令行抓取 X/Twitter 推文,支持多账号轮换和内置限流处理,解决大规模采集时账号被封或触发频率限制的问题。
用 Python 写的 Telegram 监控机器人,能批量监听群组和频道消息,适合做舆情追踪或加密货币相关情报收集。
用 Python 配合 Oxylabs 的 Google Jobs Scraper API,同时按多个搜索词和地区抓取 Google 招聘信息,省去自己处理反爬和解析页面的麻烦。
用 Java 调用 Chrome 和 Firefox 无头浏览器的 API,方便做网页抓取和自动化操作,省去自己封装浏览器协议。
非官方 Node.js 库,实时接收 TikTok 直播间的评论、礼物等事件,方便做直播互动机器人或数据采集。
用 Python 抓取 YouTube 频道、播放列表和搜索结果,绕开官方 API 限制获取视频数据。
非官方 MyAnimeList PHP 库兼 REST API,能抓取官方接口不提供的番剧与漫画数据,方便开发者直接调用。
无需登录或 API Key 就能抓取 X/Twitter 的推文、回复、时间线和长文,给 AI Agent 和自动化流程提供数据来源。
输入邮箱即可在 5000+ 平台做 OSINT 排查,聚合身份线索并检测泄露记录,无需 API key,pip 装完就能用。
TVBox 聚合接口配置源,提供 4K 秒播点播、2000+ 带 EPG 台标的直播频道和影音多仓精选,靠爬虫与每日巡检自动去死链保活。
在终端里搜索、观看和下载动漫的命令行工具,基于 Python 抓取 Gogoanime 等站点资源,也可作为 API 调用。
Oxylabs Web Scraper API 的 Python 快速上手指南,帮你用免费试用额度快速接入网页抓取接口,省去自己搭代理和反爬的麻烦。