Apify 出品的 Crawlee：给 JS 开发者准备的爬虫瑞士军刀

GitHub 仓库

apify/crawlee

总 Stars

★ 26,161

主要语言

TypeScript

查看 GitHub 项目

编辑精选常青项目，非当日热榜。

是什么

Apify 维护的 Node.js 爬虫库，统一封装 Cheerio、Puppeteer、Playwright 和纯 HTTP 四种抓取方式，TypeScript 编写，Apache-2.0 许可，2.6 万 star。

能干嘛

从静态页面到重度 JS 渲染站都能抓；内置请求队列去重、会话池、代理轮换和失败重试，写爬虫基本只剩业务逻辑要操心。

适合谁

前端/Node 栈的开发者；已有 Playwright 经验、想快速搭起采集管线的团队。

值得注意

先判断目标站需不需要浏览器渲染，静态站直接用 Cheerio 模式，速度快一个数量级；生产环境代理池和指纹配置几乎必备，文档里有现成模式可抄。

站长点评

它解决的是爬虫工程里八成的重复劳动。对比 Python 的 Scrapy，Crawlee 对 JS 渲染站更顺手；我选它的理由是 Apify 靠它吃饭，维护力度有保障。