全部项目
当前范围的仓库 28 · UTC 2026-11-04
对比排名项目StarFork30 天趋势7 天净增最近推送登录后收藏
1—NNaiboWang / EasySpiderA visual no-code/code-free web crawler/spider易采集:一个可视化浏览器自动化测试/数据采集/网页爬虫软件,可以无代码图形化的设计和执行爬虫任务。别名:ServiceWrapper面向Web应用的智能化服务封装系统。JavaScriptAGPL-3.0 · 需开源衍生作品名次历史不足44,7655,393——2026-11-02
4—Sshengqiangzhang / examples-of-web-crawlers一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、微信读书、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )HTMLMIT · 宽松，可直接商用名次历史不足14,7093,751——2025-06-28
6—Ccrawlab-team / crawlabDistributed web crawler admin platform for spiders management regardless of languages and frameworks. 分布式爬虫管理平台,支持任何语言和框架GoBSD-3-Clause · 宽松，可直接商用名次历史不足12,2901,884——2026-02-10
7—Sssssssss-team / spider-flow新一代爬虫平台,以图形化方式定义爬虫流程,不写代码即可完成爬虫。JavaMIT · 宽松，可直接商用名次历史不足11,3652,167——2023-06-14
8—Iihmily / DouyinLiveRecorder可循环值守和多人录制的直播录制软件,支持抖音、TikTok、Youtube、快手、虎牙、斗鱼、B站、小红书、pandatv、sooplive、flextv、popkontv、twitcasting、winktv、百度、微博、酷狗、17Live、Twitch、Acfun、CHZZK、shopee等40+平台直播录制PythonMIT · 宽松，可直接商用名次历史不足11,1591,497——2026-04-01
9—Gguyueyingmu / avbookAV 电影管理系统, avmoo , javbus , javlibrary 爬虫,线上 AV 影片图书馆,AV 磁力链接数据库,Japanese Adult Video Library,Adult Video Magnet Links - Japanese Adult Video DatabasePHP未知 · 限制商用 / 未知名次历史不足10,1001,992——2024-06-01
10—Kkangvcar / InfoSpiderINFO-SPIDER 是一个集众多数据源于一身的爬虫工具箱🧰,旨在安全快捷的帮助用户拿回自己的数据,工具代码开源,流程透明。支持数据源包括GitHub、QQ邮箱、网易邮箱、阿里邮箱、新浪邮箱、Hotmail邮箱、Outlook邮箱、京东、淘宝、支付宝、中国移动、中国联通、中国电信、知乎、哔哩哔哩、网易云音乐、QQ好友、QQ群、生成朋友圈相册、浏览器浏览历史、12306、博客园、CSDN博客、开源中国博客、简书。PythonGPL-3.0 · 需开源衍生作品名次历史不足8,2681,471——2026-04-21
11—Llorien / awesome-web-scraping用于网络抓取和数据处理的库、工具和 API 列表。JavaScriptNOASSERTION · 限制商用 / 未知名次历史不足8,207969——2026-10-27
12—Aandeya / pholcusPholcus是一款纯golang编写的分布式高并发爬虫软件GoApache-2.0 · 宽松，可直接商用名次历史不足7,5841,664——2026-08-24
14—Lluyishisi / Anti-Anti-Spider越来越多的网站具有反爬虫特性,有的用图片隐藏关键数据,有的使用反人类的验证码,建立反反爬虫的代码仓库,通过与不同特性的网站做斗争(无恶意)提高技术。(欢迎提交难以采集的网站)(因工作原因,项目暂停)Python未知 · 限制商用 / 未知名次历史不足7,2932,123——2021-10-17
15—Bbda-research / node-crawler用于 NodeJS + 服务器端 jQuery 的网络爬虫/蜘蛛 ;-)TypeScriptMIT · 宽松，可直接商用名次历史不足6,796862——2026-06-18
16—Wwechatsync / Wechatsync将文章同步到多个内容平台的浏览器工具。TypeScriptGPL-3.0 · 需开源衍生作品名次历史不足6,5531,105——2026-10-23
17—SSpiderClub / haipproxy:sparkling_heart：高可用分布式 IP 代理池，由 Scrapy 和 Redis 提供支持PythonMIT · 宽松，可直接商用名次历史不足5,525890——2022-12-26
19—Ttophubs / TopList今日热榜,一个获取各大热门网站热门头条的聚合网站,使用Go语言编写,多协程异步快速抓取信息,预览:https://mo.fishGoApache-2.0 · 宽松，可直接商用名次历史不足4,732935——2023-02-23
20—BBoris-code / feapder🚀🚀🚀feapder is an easy to use, powerful crawler framework | feapder是一款上手简单,功能强大的Python爬虫框架。内置AirSpider、Spider、TaskSpider、BatchSpider四种爬虫解决不同场景的需求。且支持断点续爬、监控报警、浏览器渲染、海量数据去重等功能。更有功能强大的爬虫管理系统feaplat为其提供方便的部署及调度PythonNOASSERTION · 限制商用 / 未知名次历史不足3,736549——2026-08-21
商用三档依据许可证元数据自动分类；具体义务需结合实际使用方式核对。未知不等于禁止商用。