Colly：Go 语言的优雅爬虫框架，2.5 万 star

GitHub 仓库

gocolly/colly

总 Stars

★ 25,552

主要语言

Go

查看 GitHub 项目

编辑精选常青项目，非当日热榜。

是什么

Colly 是 Go 语言的爬虫框架，设计哲学是“优雅”：几十行代码就能写出带并发控制、去重、限速、代理轮换的爬虫。截至 2026 年 10 月 17 日核验 2.5 万 star，Apache-2.0 许可，当天仍在提交。

能干嘛

Collector 模式声明式写规则，回调里处理数据；内置请求去重、延迟限速、随机 UA；分布式抓取、队列持久化都有现成方案；配合 Go 的并发模型，单机吞吐很可观。

适合谁

适合 Go 栈的开发者和数据团队；也适合对 Python 爬虫的 GIL 和速度不满意、想换条赛道的人。

值得注意

JS 重度渲染页面原生搞不定，得配 colly 的浏览器插件或走代理渲染；并发和限速参数先保守再放大，别一上来就把目标站打挂；遵守 robots.txt，商用采集先做合规确认。

站长点评

Go 写爬虫的人绕不开 Colly，就像 Python 绕不开 Scrapy。对比 Scrapy 的“大而全”，Colly 是“小而快”，API 设计明显更现代。2.5 万 star、持续维护，Go 栈做采集选它基本不会错。