把任意网页抓取并转成干净 Markdown 或结构化数据,直接喂给 LLM 和 AI Agent,省去自己写爬虫和清洗的麻烦。
分析各类反爬与机器人检测系统(Akamai、PerimeterX、Arkose、AWS WAF 等)的识别原理,并给出绕过浏览器指纹脚本的可行对策,适合做网页采集时参考。
命令行图片批量下载器,支持 Pixiv、Twitter、DeviantArt、Danbooru 等几十个图站,一条命令就能把画师主页或标签下的图集整批抓下来。
定制版 Selenium Chromedriver,开箱即用,能绕过 CloudFlare、Distil、Imperva 等主流反爬和机器人检测系统,适合做浏览器自动化时被拦截的场景。
云原生 Web 应用防火墙,基于 Nginx 和 ModSecurity,开箱即用地为容器与 Kubernetes 环境提供反爬虫、DNSBL、Let's Encrypt 等安全防护。
给 AI 代理用的隐身无头浏览器,能绕过 Cloudflare 和反爬检测,可直接替换 Puppeteer/Playwright。
基于 CDP 直接控制 Chromium 浏览器的自动化库,无需 WebDriver,能模拟真实用户交互并规避反爬检测,适合做网页抓取和自动化测试。
Python 网页抓取框架,从单次请求到大规模爬取都能处理,内置 Playwright 支持,还提供 MCP 服务方便接入 AI 工作流。
把 Playwright 浏览器自动化能力封装成 MCP 服务器,让 AI Agent 通过结构化接口操控网页、抓取页面内容,无需依赖截图识别。
一个开源的社交媒体下载器,支持从 Instagram、TikTok、Twitter、Reddit、SoundCloud 等平台保存视频和音乐,界面清爽、无需广告。
在终端里搜索、浏览并直接播放动漫的命令行工具,基于 fzf 交互选择,支持 Linux、macOS、Termux 和 Steam Deck,还能用 syncplay 和朋友同步观看。
把任意网站变成命令行工具,让 AI Agent 复用你已登录的浏览器会话执行网页操作,省去重复登录和手动点击。
基于 Claude Code 的求职自动化框架,在本地评估职位、定制简历、撰写求职信并准备面试,数据自己掌控。
一个基于 Chromium 的代理服务器,自动处理 Cloudflare 的浏览器验证,让爬虫和自动化脚本能顺利访问被防护的网站。
Node.js/TypeScript 网页抓取与浏览器自动化库,内置代理轮换和反封锁,兼容 Puppeteer、Playwright、Cheerio,可稳定采集数据供 AI、LLM、RAG 使用。
用 Go 写的 Chrome DevTools Protocol 驱动,直接操控浏览器做网页自动化和爬虫,省去手动管理浏览器进程的麻烦。
面向 OPC 和中小微企业的自媒体获客智能体,用多智能体协作自动完成内容抓取、RPA 操作和营销获客流程。
浏览器端自动验证码破解插件,能识别并绕过 reCAPTCHA、Cloudflare Turnstile、Arkose 等主流验证码,配合 Selenium、Puppeteer、Playwright 做自动化抓取。
Firecrawl 官方 MCP 服务器,让 AI Agent 通过 MCP 客户端搜索、抓取网页并提取正文,支持批量处理、爬取、站点地图和监控。
Python 网页抓取与浏览器自动化库,支持 Playwright、BeautifulSoup 和原始 HTTP,自带代理轮换,方便为 AI、LLM、RAG 稳定采集网页数据。
给 AI 编程助手用的本地优先网页检索工具,通过 MCP 提供搜索、抓取、爬取和调研能力,无需 API key 和云端,每次查询零成本。
把长视频自动剪成 9:16 竖屏短视频,用 LLM 挑高光片段、Whisper 转写、自动裁切,免费无水印,替代 Opus Clip 等付费服务。
每周更新《经济学人》《纽约客》《卫报》等英文杂志的免费下载资源,提供 epub、mobi、pdf 多种格式,方便英语学习者获取原版阅读材料。
…e 繁體中文 - maintenance 複查上版 11 個無法驗證的連結,區分可讀頁面、登入入口與反爬蟲阻擋,未發現確定失效。三語改用 Arena 現行路徑及 DeepLearning.AI 課程 canonical URL;不把受阻連結改列成功,也不放寬掃描基線。 [來源 1](https://github.com/WenyuChio
…unbook 又禁止把 security check 当成未登录,两条规则叠加把 Agent 推向「反爬滑块」的错误分支。 - 修复: check() 新增第 4 层只读探测 cdp zhipin login cookie() ,用纯标准库 实现的最小 WebSocket 客户端直接问 CDP 浏览器本体( Storage.getCook
…指南(环境要求、使用方法、3 步流程、已知限制、致谢、合规声明)。 - TikTok:增加地区限制、反爬、登录态、语言混合说明 - 微博:增加移动端 UA 伪装、m.weibo.cn 优先说明 - 知乎:增加独立视频 / 问答内嵌 / 专栏三种链接形态 - platform-status.md 自动化 :CI 现在会在每次 push 时用
…没人能配通 - 微博 :依赖一个久未维护的个人 fork,实际已不可用 - 微信公众号 :全文阅读被反爬拦截越来越严重( 339),却还在宣传"零配置可用" 与其展示坏掉的承诺,不如诚实下架。等有可靠的上游方案时它们会回来(v1.4.0 移除 Discord/头条是同样的逻辑)。现在的口径: 13 个平台,6 个真零配置 。 新功能 -