连接与传输
共 51 个仓库 · Python
从新闻网站批量抓取文章正文、标题和元数据的 Python 库，是 Newspaper3k 的维护分支，适合做新闻语料采集和数据集准备。
一套面向 40 多个热门网站的 Python 爬虫脚本合集，内置代理和反爬绕过能力，省去从零处理验证码与封禁的麻烦。
匿名查看 Instagram 私密账号帖子的命令行工具，面向 OSINT 调查场景，无需登录或关注即可获取受限内容。
一条命令就能把 Reddit 的帖子、评论和用户数据批量抓取下来，导出成 CSV 或 JSON，方便做数据分析和存档。
无需登录或 API Key 就能抓取 X/Twitter 的推文、回复、时间线和长文，给 AI Agent 和自动化流程提供数据来源。
把 Scrapy 爬虫包装成 HTTP API，让其他语言或服务能远程触发爬虫并实时拿到抓取结果，省去自己搭调度和传输层。
开放的国际制裁名单、关注人物和政治敏感人物数据库，供尽职调查、调查报道和反洗钱核查使用。
把任意网站抓取打包成 ZIM 离线文件，配合 Kiwix 就能在无网络环境下浏览完整站点。
从 Instagram、Twitch、TikTok、LinkedIn 抓取用户主页，提取简介里的邮箱并用 SMTP 验证有效性，最后导出 CSV，适合做免费线索挖掘。
用 Python 抓取 Redfin、Realtor 等房产网站的挂牌数据，直接输出结构化表格，省去自己写爬虫和解析页面的麻烦。
整理 Twitter 内部 GraphQL 接口的非官方文档，方便开发者查阅未公开的 API 端点与参数，用于数据抓取和逆向分析。
用 Python 脚本在 Termux 环境下批量抓取 Telegram 群组成员并自动添加，适合在手机上做社群拉新和成员采集。
用 Python 和 Selenium 自动操作 Tinder，支持 Facebook/Google 登录，自动滑动并抓取匹配数据，省去手动操作。
用 Python 写的批量获客脚本，让没有编程基础的人也能大规模采集潜在客户线索，内置多种爬虫与解析技巧。
一个通用的 Reddit 爬虫，能抓取任意子版块或用户的内容，适合做数据采集和舆情分析。
通过 SSH 在终端里直接显示并操作完整的远程桌面，无需额外客户端或图形转发，适合在纯命令行环境下远程控制图形界面。
用 Python 抓取 Google Maps 上商户的评论数据，适合做口碑分析和竞品调研时批量采集评论。
在终端里搜索、观看和下载动漫的命令行工具，基于 Python 抓取 Gogoanime 等站点资源，也可作为 API 调用。
用 Python 抓取 YouTube 频道、播放列表和搜索结果，绕开官方 API 限制获取视频数据。
自动获取被 Cloudflare 挑战拦截的网站所下发的 cf_clearance Cookie，方便爬虫绕过验证继续访问。
在 Python 代码里直接创建 ngrok 隧道，把本地服务暴露到公网，方便接收 webhook、做演示或调试 API，无需手动启动 ngrok 客户端。
用 PowerShell 写服务端的 Windows 远程桌面工具，客户端基于 Python/QT6 跨平台运行，适合需要轻量隐蔽远程控制的场景。
把文件传输、抠图、视频图片编辑、YouTube/X 下载、格式转换等常用操作塞进 Windows 右键菜单，点一下就能用，省去来回开软件。
抓取搜索引擎结果页并输出结构化 JSON 数据，保留来源引擎、排名、链接、标题和摘要，适合 SEO 分析、调研和自动化流程。