全部项目
当前范围的仓库 42 · UTC 2026-11-05
对比排名项目StarFork30 天趋势7 天净增最近推送登录后收藏
1—Ffirecrawl / firecrawl面向 AI 智能体获取网页数据的采集工具。TypeScriptAGPL-3.0 · 需开源衍生作品名次历史不足197,92910,458——2026-11-02
2—Uunclecode / crawl4ai适用于大语言模型和人工智能代理的开源网络爬虫和抓取工具：将任何网站转换为干净、适合大语言模型的 Markdown。自己运行，或者一键使用Crawl4AI Cloud。加入我们的 Discord https://discord.gg/VuxzM8mtfPythonApache-2.0 · 宽松，可直接商用名次历史不足86,7779,043——2026-11-02
3—Sscrapy / scrapyScrapy，一个用于 Python 的快速高级网络爬行和抓取框架。PythonBSD-3-Clause · 宽松，可直接商用名次历史不足65,19012,095——2026-11-02
4—Ddgtlmoon / changedetection.io作者声明：用于网站更改检测、网页监控和网站更改警报的最佳和最简单的工具。非常适合跟踪内容更改、降价、补货警报和网站篡改监控 - 全部免费或享受我们的 SaaS 计划！PythonApache-2.0 · 宽松，可直接商用名次历史不足35,4612,194——2026-11-02
5—CCloakHQ / CloakBrowserStealth Chromium 通过了所有机器人检测测试。使用源级指纹补丁替换 Playwright。通过了 50 多项测试。PythonMIT · 宽松，可直接商用名次历史不足32,6932,719——2026-11-01
7—Bbrowserbase / stagehand用于提取数据并与网络上的任何网站交互的 SDK。开始使用 Claude Code、Codex、Eve、Mastra 等。TypeScriptMIT · 宽松，可直接商用名次历史不足25,9091,805——2026-11-02
8—Llexmount / moli作者声明：适用于 AI 代理的最佳无头浏览器。精简、快速、高兼容性。内置 RustRustApache-2.0 · 宽松，可直接商用名次历史不足22,222610——2026-11-02
9—EEvil0ctal / Douyin_TikTok_Download_API🚀 自托管的抖音、TikTok、B 站数据采集与无水印视频下载 API,支持 AI agent 通过 MCP 调用与离线语音转文字,Docker 一键部署。| Self-hosted TikTok, Douyin & Bilibili scraper and no-watermark video downloader — async REST API, MCP server for AI agents, CLI and web console, plus offline speech-to-text for downloaded videos. Self-healing identity pool, PostgreSQL archive, one docker compose up.PythonApache-2.0 · 宽松，可直接商用名次历史不足21,1122,938——2026-11-02
10—MMODSetter / SurfSense气隙、注重隐私的开源 NotebookLM 替代方案。研究、转换和编辑您的文档的人工智能代理。加入我们的 Discord：https://discord.gg/ejRNvftDp9PythonApache-2.0 · 宽松，可直接商用名次历史不足16,7171,597——2026-11-02
11—Yyusufkaraaslan / Skill_Seekers通过自动冲突检测将文档网站、GitHub 存储库和 PDF 转换为 Claude AI 技能PythonMIT · 宽松，可直接商用名次历史不足15,2661,548——2026-09-30
12—Sseleniumbase / SeleniumBase📊 用于网页抓取、浏览器自动化和 E2E 测试的 API。 CDP 模式绕过机器人检测并处理验证码。为剧作家增加隐秘性。包括 MCP 服务器。PythonMIT · 宽松，可直接商用名次历史不足13,2231,610——2026-11-03
13—Jjo-inc / camofox-browser适用于 AI 代理的隐形无头浏览器 — 绕过 Cloudflare、机器人检测和反抓取。替代木偶师/剧作家。JavaScriptMIT · 宽松，可直接商用名次历史不足12,1191,225——2026-11-02
14—Jjhy / jsoupjsoup：Java HTML 解析器，专为 HTML 编辑、清理、抓取和 XSS 安全而构建。JavaMIT · 宽松，可直接商用名次历史不足11,4152,317——2026-11-03
15—NNopeCHALLC / nopecha-extension适用于您的浏览器的自动验证码解算器。与 Selenium、Puppeteer、Playwright 等一起工作。未知MIT · 宽松，可直接商用名次历史不足11,089234——2026-10-02
16—Ppinchtab / pinchtab高性能浏览器自动化桥和多实例协调器，具有先进的隐形注入和实时仪表板。GoMIT · 宽松，可直接商用名次历史不足10,542791——2026-10-27
17—Aapify / crawlee-pythonCrawlee——一个用于 Python 的网络抓取和浏览器自动化库，用于构建可靠的爬虫。提取 AI、LLM、RAG 或 GPT 的数据。从网站下载 HTML、PDF、JPG、PNG 和其他文件。适用于 Parsel、BeautifulSoup、Playwright 和原始 HTTP。有头模式和无头模式。通过代理轮换。PythonApache-2.0 · 宽松，可直接商用名次历史不足9,637820——2026-11-02
19—Llorien / awesome-web-scraping用于网络抓取和数据处理的库、工具和 API 列表。JavaScriptNOASSERTION · 限制商用 / 未知名次历史不足8,207969——2026-10-27
20—Aalirezamika / autoscraper一个智能、自动、快速、轻量级的 Python 网络爬虫PythonMIT · 宽松，可直接商用名次历史不足8,068833——2026-07-29
商用三档依据许可证元数据自动分类；具体义务需结合实际使用方式核对。未知不等于禁止商用。