全部项目
当前范围的仓库 12 · UTC 2026-11-04
对比排名项目StarFork30 天趋势7 天净增最近推送登录后收藏
1—Ccrawlab-team / crawlabDistributed web crawler admin platform for spiders management regardless of languages and frameworks. 分布式爬虫管理平台,支持任何语言和框架GoBSD-3-Clause · 宽松，可直接商用名次历史不足12,2901,884——2026-02-10
4—DDropsDevopsOrg / ECommerceCrawlers实战🐍多种网站、电商数据爬虫🕷。包含🕸:淘宝商品、微信公众号、大众点评、企查查、招聘网站、闲鱼、阿里任务、博客园、微博、百度贴吧、豆瓣电影、包图网、全景网、豆瓣音乐、某省药监局、搜狐新闻、机器学习文本采集、fofa资产采集、汽车之家、国家统计局、百度关键词收录数、蜘蛛泛目录、今日头条、豆瓣影评、携程、小米应用商店、安居客、途家民宿❤️❤️❤️。微信爬虫展示项目:PythonMIT · 宽松，可直接商用名次历史不足5,7661,456——2024-05-22
6—SSpiderClub / haipproxy:sparkling_heart：高可用分布式 IP 代理池，由 Scrapy 和 Redis 提供支持PythonMIT · 宽松，可直接商用名次历史不足5,525890——2022-12-26
8—BBoris-code / feapder🚀🚀🚀feapder is an easy to use, powerful crawler framework | feapder是一款上手简单,功能强大的Python爬虫框架。内置AirSpider、Spider、TaskSpider、BatchSpider四种爬虫解决不同场景的需求。且支持断点续爬、监控报警、浏览器渲染、海量数据去重等功能。更有功能强大的爬虫管理系统feaplat为其提供方便的部署及调度PythonNOASSERTION · 限制商用 / 未知名次历史不足3,736549——2026-08-21
9—GGerapy / Gerapy基于 Scrapy、Scrapyd、Django 和 Vue.js 的分布式爬虫管理框架。PythonMIT · 宽松，可直接商用名次历史不足3,515650——2026-07-04
10—Mmy8100 / scrapydwebWeb app for Scrapyd cluster management, Scrapy log analysis & visualization, Auto packaging, Timer tasks, Monitor & Alert, and Mobile UI. Docs 文档 :point_right:PythonGPL-3.0 · 需开源衍生作品名次历史不足3,410584——2025-02-19
11—Wwkunzhi / Python3-SpiderPython爬虫实战 - 模拟登陆各大网站 包含但不限于:滑块验证、拼多多、美团、百度、bilibili、大众点评、淘宝,如果喜欢请start ❤️Python未知 · 限制商用 / 未知名次历史不足3,4061,031——2023-11-03
12—Ttb0hdan / domains作者声明：世界上最大的单一互联网域名数据集JavaScriptBSD-3-Clause · 宽松，可直接商用名次历史不足1,177186——2026-05-03
商用三档依据许可证元数据自动分类；具体义务需结合实际使用方式核对。未知不等于禁止商用。