简介
分布式爬虫管理平台，支持任意语言编写的爬虫
界面截图
截图占位
截图占位
部署方式
Docker
适合在单机环境快速启动 Crawlab，降低依赖安装和环境配置成本。
Docker Compose
适合在单机或小团队环境中同时编排 Crawlab 及 MongoDB 等依赖服务。
Kubernetes
适合在已有 K8s 集群中进行生产化、可扩展和易运维的部署。
Crawlab 的替代品 查看全部 爬虫系统 →
Scrapy 开源
Python 爬虫框架事实标准
Crawlee 开源
Node.js 采集框架，内置反爬与代理轮换
Decodo 闭源
Decodo 提供住宅、移动、ISP 与数据中心代理网络，以及 Web Scraping API，面向需要大规模采集公开网页数据的团队，强调高可用性与代理资源覆盖。
Apify SDK 开源
You-Get 开源
You-Get
后羿采集器 闭源
后羿采集器是由前谷歌搜索技术团队基于人工智能技术研发的新一代网页采集软件，该软件功能强大，操作简单，可谓是居家旅行随身神器。
Apify SDK for JavaScript 开源
Apify SDK for JavaScript | SDK for JavaScript | Apify Documentation
基本信息
类型 开源软件
开源协议 BSD-3-Clause
最近核实 2026-07-18
所属方案
爬虫系统 · 3 个候选 →数据说明
Stars / 提交时间来自 GitHub API 自动同步；定价与功能信息人工核实。