不想写 XPath 了？ScrapeGraphAI 用一句话「说」出你要抓的数据

GitHub 仓库

ScrapeGraphAI/Scrapegraph-ai

总 Stars

★ 31,927

主要语言

Python

查看 GitHub 项目

编辑精选常青项目，非当日热榜。

一句话介绍

用大语言模型做网页抓取的 Python 库：一句话描述想要哪些字段，它自动分析页面结构并提取，不用再手写 XPath 或 CSS 选择器。核验标星 31927，MIT 协议，10 月 6 日更新。

它能做什么

新闻、商品、招聘信息等页面的一句话抽取；支持多种大模型后端，也能接本地模型自己跑。

推荐给谁

被「页面结构多变」折磨的数据工程师，想快速做 demo 的 AI 开发者。比本站发过的 firecrawl 更轻，还可本地部署。

上手前先看

要自备 LLM 的 API key，按 token 计费，大批量跑前先拿几十页估成本；目标站改版后 prompt 可能要微调。

站长点评

3.1 万星说明「说人话抓数据」挠到痒处了。我看中它的分工：模型负责理解结构，代码负责稳定执行，各干各擅长的。